人工智能引发能源问题，我们该怎么办？(一）
最新更新时间：2020-02-12
阅读数：
专用硬件加速实在必行
首先，让我们考虑一下问题的症结所在。大约在2005年，处理器内核时钟频率的增长进入了瓶颈。缩小工艺尺寸和降低内核电压不再像以前一样能够为我们带来优势。其根本的问题，就是计算已经达到了功率密度（W/mm2）的极限。
如果我们在同一个裸片上放置更多的内核，我们就可以在相同的功耗预算下增加运算数量，但其前提是我们还还要在一定程度上降低时钟频率，以抵消额外内核所消耗的能量。AMD和英特尔都是在2005-2006年期间发布了他们的首个双核处理器，这并不是巧合。然而，随着我们继续尝试增加内核的数量，我们必须考虑每个运算所消耗的能量和每个运算所需的芯片面积。此外，我们还需要确保我们能够通过N来有效地实现并行算法，其中N是内核的数量。对于所有的算法来说，这一问题的通用解决方案，或者说“计算饱和的灵丹妙药”仍然是一个难以捉摸的问题，现在最好的解决方法就是应用“自适应硬件”。
事实证明，无论您的处理器设计是使用多核CPU、GPU还是SoC实现的，在处理器级的总体功耗分布都将大致相同。所以假若我们估算出以下的情况便较为接近真实情况：
内核=30%
内部存储器（L1、L2、L3）=30%
外部存储器（DDR）=40%
在上面的分析中，我们没有考虑的是还存在另外一个总体优化的方式，那就是专用硬件加速器优化的实现方式。我们可以对专用硬件进行优化以极高效地执行特定的功能。通常情况下，这种硬件是为了减少外部存储器访问而设计的，其同时减少了时延与功耗。我们可以对专用硬件进行优化，以便给定算法的数据运动部分使用本地化存储器（BlockRAM、UltraRAM）来进行中间结果的存储。
设计高效加速器是多维度的设计问题
- 如何实现硬件优化来处理我们的特定算法？(Mark很好地回答了这一问题，即必须将算法从“所有算法的空间”移动到“受限空间”。)
- 如何保持携带数据的加速器，以确保计算加速器在每个时钟周期都是饱和的？
- 如何最大限度地减少通信开销？
- 如何优化正在处理的运算符的动态范围？
- 如何最大限度地减少外部存储器，甚至是本地存储器的使用？
- 如何消除指令处理管道开销？
- 如何安排操作以确保数据重用，从而使存储器流量最小化，并且使存储器访问相关的运算数量最大化？
自适应硬件的战略优势这里，我们将讨论和评估赛灵思的自适应硬件及DNNDK如何应对上述这些尖锐的问题和挑战，特别是当它涉及到机器学习推断时。在进行下一次设计之前，我建议您回顾一下Mark有关这个主题的精彩演讲，然后再考虑如何在您的下一次设计中使用自适应硬件来实现您的战略优势。
在这篇文章的第2部分中，我们将讨论和评估赛灵思的自适应硬件及DNNDK（现在已经发布Vitis AI统一软件平台）如何应对这些挑战，特别是当它涉及到机器学习推断时。
To be continued......
本文转载自：赛灵思
作者：Quenton Hall，赛灵思公司工业、视觉、医疗及科学市场的 AI 系统架构师
免责声明：本文为转载文章，转载此文目的在于传递更多信息，版权归原作者所有。本文所用视频、图片、文字如涉及作品版权问题，请联系小编进行处理。
关于贸泽电子
贸泽电子（Mouser Electronics）是一家全球授权半导体和电子元器件授权分销商，帮助超过800家业界领先制造商销售产品。我们提供的产品种类齐全，可订购500多万种在线产品，将新产品和新技术第一时间提供给设计工程师和采购人员。欢迎关注我们，获取第一手的设计与产业资讯信息！
京公网安备 11010802033920号