揭秘IPU的设计理念:站在客户的角度设计处理器

发布者:EE小广播最新更新时间:2022-07-15 来源: EEWORLD关键字:IPU  处理器  英特尔 手机看文章 扫描二维码
随时随地手机看文章

“IPU设计者的幕后故事”:英特尔研究员Brad Burres介绍如何通过基础设施处理器(IPU)使中央处理器(CPU)摆脱低价值的繁琐任务,使其专注于处理更重要的工作负载。 

 

image.png


如果问Brad Burres在业余时间有什么爱好,您可能想不到他的回答如此简单:除了骑摩托车、徒步旅行和带领童子军野外远足,他还喜欢DIY。他说:“当我们使用射钉枪时,只要全神贯注,那便不会遇到什么棘手问题了。”


有趣的是,作为以太网产品事业部的英特尔研究员,Brad Burres是打造IPU的幕后关键人物之一。IPU是一款针对特定领域的处理器,旨在为服务器客户解决棘手问题。当CPU内核数量随着计算需求的增加而增加,开销或基础设施处理任务量也会随之增加。人们最不想看到的事情就是让强大的CPU内核陷入处理开销的泥潭,以致无法有效运行应用程序。


可以这样作类比:假如您希望增加团队人数,从而更快地完成工作,但这需要成本——需要考虑分配任务所需的时间、确保各项工作妥善完成、管理团队的轮班时间表等。在数据中心内,网络、存储和安全等基础设施功能都需要处理能力,但不一定必须由CPU处理,而这就是IPU的用武之地。


Brad Burres表示:“多达30%至40%的处理器周期花费在基础设施上。”那么,将其中一些基础设施任务转移到IPU,则可以为更重要的工作负载释放CPU周期。


Brad Burres介绍道:“大型基础设施供应商都有一个共同的目标,那就是‘不在至强®处理器上运行任何基础设施周期’。如果您是微软Azure、AWS或谷歌云等公有云提供商,您不会希望在基础设施任务或网络上花费丝毫至强计算周期。”


群策群力解决问题


英特尔与谷歌联手开发了其首款ASIC IPU。谷歌这家网络巨头有一份具体的需求清单,需要全方位深度合作并进行共同开发的伙伴关系。基于此,英特尔与谷歌的团队共同开发了可编程数据包处理功能,以支持由谷歌定义的一系列使用场景。双方合作的最终成果就是Mount Evans,这款ASIC芯片负责进行硬件卸载,也利用ARM N1内核来处理那些必须被处理,而又无需英特尔®至强®处理器的强大功能的工作负载。不过,这并非该款芯片的全部优点。为确保Mount Evans能够尽可能高效地处理基础设施任务,双方做了大量工作。例如,Mount Evans支持每秒传输多达2亿个数据包(这些信息包基于实际工作负载,而非基准工作负载)。


该款芯片虽然由英特尔与谷歌共同设计,但它绝非仅被用来解决谷歌所面临的问题。Brad Burres说:“Mount Evans并非仅针对谷歌而打造。虽然其优化功能针对谷歌在其自身运营中发现的问题而量身定制,但该款芯片足够灵活,也可以用于其它许多地方。”


其他一些客户也希望利用首代ASIC IPU来满足其数据中心运营的类似需求。


Brad Burres表示:“我们从多个客户那里了解到存在类似问题,然后花时间和从事技术工作的朋友讨论如何解决这些问题,并寻找共性,由此催生出打造IPU的绝佳想法。”他补充说,面临类似基础设施挑战的其他公司已经提出了自己的解决方案。


进化理论:智能网卡、IPU以及未来


虽然IPU进入大众视野才短短一年,但Brad Burres已经为此冥思苦想了很多年。英特尔首款IPU的开发工作始于2016年,当时是为了推出另一款与众不同的产品,而这款产品最终演变成为一年前面市的产品。但其实,这款芯片的历史可以追溯到更早。


Brad Burres在之前担任智能网卡首席架构师期间,专注于网络卸载、存储卸载和整体数据包处理等领域,专门针对顶级云服务提供商。因此,对于一款最终将被设计用于这些领域的特定处理器来说,这些都是熟悉的领域。从智能网卡到IPU的转变是一个合乎逻辑的演变,而非仅仅是一个术语的变化。事实上,两者之间的差异更广泛地诠释了IPU的未来。


Brad Burres解释说:“智能网卡是一个临时术语。普通网卡不具备智能化功能,若非借助FPGA或计算,它只是一个固定管道。而智能网卡不仅拥有智能化功能,还具备内核和灵活性,但它只局限在网络范围内。随着存储和遥测等附加功能的增加,我们有更多机会进行优化,‘智能网卡’一词也不再能准确地描述这些芯片的功能。”


在需求波动的情况下,对于整体业务围绕租赁服务器容量的公司来说,释放通用算力十分重要。在此过程中,为满足某些功能的需求增加而过度配置是一种浪费,而引入更强大的至强处理器则不是非常经济。基于此,客户争相购买Mount Evans IPU库存,以应对上述挑战。


Brad Burres说:“IPU的市场需求非常旺盛。这不仅仅是芯片出货的问题,英特尔必须确保其软件也能够满足客户需求,例如扩展到边缘。它不像至强处理器这样,当我们把至强处理器卖给客户后,客户就会去编写软件。而在IPU的出货中,我们发挥了很重要的作用,并希望确保渐进式的进步。”


5月发布的IPU更新路线图列出了未来四年英特尔IPU,包括第二代Mount Morgan的一些细节。虽然现在还处于早期阶段,但致力于开发Mount Morgan和后续第三代IPU的团队正在与至强产品团队合作,以协调并确保他们沿着各自的路径并行前进,并在必要时汇合。


“前途不可限量。”当被问到IPU的未来发展时,Brad Burres说:“一个新领域的创新率相当高,这也正是它的魅力所在。IPU足够灵活,可以支持更多使用场景。Mount Evans的使用场景就涵盖了网络和基础设施领域,下一步则是存储领域。随后,您会开始看到一些I/O任务向下转移到IPU。创新空间无处不在——而我们正处于冰山一角。”


这种想法可能会让很多人大吃一惊,但工程师更喜欢“初期而有趣”的阶段。因为在这个阶段,“开销任务”(例如排满会议的日程表)被压缩到最低。开发IPU虽然不像周日下午使用射钉枪那么简单,但它比很多人想象的要更容易一些。


关键字:IPU  处理器  英特尔 引用地址:揭秘IPU的设计理念:站在客户的角度设计处理器

上一篇:打破内存墙、功耗墙,国产芯片AI-NPU的现在和未来
下一篇:英特尔携手汉朔科技及微软打造智慧零售AI解决方案

推荐阅读最新更新时间:2024-10-24 20:25

英特尔推出全新的基础设施处理器(IPU)
英特尔 IPU 能够提高数据中心效率与可管理性,是目前唯一与超大规模云合作伙伴共同构建的 IPU产品。 新闻: 在今日举行的Six Five峰会上,英特尔公布了其对基础设施处理器 (IPU) 的愿景。IPU是一种可编程网络设备,旨在使云和通信服务提供商减少在中央处理器 (CPU) 方面的开销,并充分释放性能价值。利用 IPU,客户能够部署安全稳定且可编程的解决方案,从而更好地利用资源,平衡数据处理与存储的工作负载。 Guido Appenzeller ,英特尔数据平台事业部首席技术官表示:“IPU 是一种全新的技术类别,是英特尔云战略的重要支柱之一。它扩展了我们的智能网卡功能,旨在应对当下复杂的数据中心,并提升效率。在英特
[网络通信]
英特尔发布IPU发展规划,初代产品与谷歌合作开发
据外媒报道,在日前举办的“愿景”大会上,英特尔公布了其CPUGPU之外的另一“大芯片”产品线IPU(基础设施处理器)发展规划。 英特尔IPU与英伟达等公司推出的DPU概念类似,均着眼于分担服务器CPU的网络控制、存储管理和安全等工作负载,提高数据中心效能。 根据这份展望至2026年的规划,该公司名为Mount Evans的IPU产品是与谷歌合作开发,将在今年交付谷歌等数据中心厂商,该产品基于Arm Neoverse内核ASIC,此外,基于FPGA的IPU产品,名为Oak Springs Canyon,也将在今年开始发货。 路线图显示,英特尔下一代适配400Gbps的IPU将在2023到2024年问世,适配800Gbps数据交换能
[手机便携]
英特尔携手浪潮、锐捷网络和Silicom,构建强大的IPU生态系统
原始设计制造商将设计和开发全新的基础设施处理器产品 近日,英特尔宣布与浪潮、锐捷网络、Silicom携手合作,共同设计并开发全新的FPGA基础设施处理器(IPU)解决方案,为云和网络客户提供高度定制化的可编程解决方案。此次合作不仅进一步实现了英特尔的IPU愿景,扩展了IPU生态系统,同时也加速为客户创建全面可编程网络以解决他们面临的重大业务挑战。在12月7日-10日举行的2021英特尔FPGA技术大会上,了解有关英特尔®现场可编程门阵列的更多信息。 英特尔 可编程解决方案事业部副总裁Patrick Dorsey表示:“与这些极具创新意识的合作伙伴携手,能够把IPU平台的安全和可编程优势带给更多客户。我们与生态系统以及领先
[嵌入式]
英特尔发布重大技术架构的改变和创新,面向CPU、GPU和IPU
英特尔驱动数据中心、边缘和客户端迈入下一个计算时代,直面未来工作负载和计算挑战 2021年8月19日——在2021年英特尔架构日上,英特尔公司高级副总裁兼加速计算系统和图形事业部总经理Raja Koduri携手多位英特尔架构师,全面介绍了两种全新x86内核架构的详情;英特尔首个性能混合架构,代号“Alder Lake”,以及智能的英特尔®硬件线程调度器;专为数据中心设计的下一代英特尔®至强®可扩展处理器Sapphire Rapids;基础设施处理器(IPU);即将推出的显卡架构,包括Xe HPG微架构和Xe HPC微架构,以及Alchemist SoC, Ponte Vecchio SoC。 这些新架构将为即将推出的高性能
[嵌入式]
揭秘IPU的设计理念:站在客户的角度设计处理器
“IPU设计者的幕后故事”: 英特尔研究员Brad Burres介绍如何通过基础设施处理器(IPU)使中央处理器(CPU)摆脱低价值的繁琐任务,使其专注于处理更重要的工作负载。 如果问Brad Burres在业余时间有什么爱好,您可能想不到他的回答如此简单:除了骑摩托车、徒步旅行和带领童子军野外远足,他还喜欢DIY。他说:“当我们使用射钉枪时,只要全神贯注,那便不会遇到什么棘手问题了。” 有趣的是,作为以太网产品事业部的英特尔研究员,Brad Burres是打造IPU的幕后关键人物之一。 IPU是一款针对特定领域的处理器,旨在为服务器客户解决棘手问题。当CPU内核数量随着计算需求的增加而增加,开销或基础设施处理任务量
[物联网]
揭秘<font color='red'>IPU</font>的设计理念:站在客户的角度设计<font color='red'>处理器</font>
德赛西威:轻量级智能驾驶域控制器IPU02已获多个项目定点,即将实现量产
8月24日消息,德赛西威日前接受机构调研时表示,公司轻量级智能驾驶域控制器IPU02已推出更多新方案,适配国内车市的中低至中高价位区间车型这一最大的细分市场公司,目前已获得多个项目定点,即将实现量产。 此外,公司第三代智能座舱域控制器已实现规模化量产,并在理想汽车、奇瑞等众多客户的车型上配套供货,第四代智能座舱域控制器已获得多个项目订单。
[汽车电子]
理想 L9 与德赛西威 IPU04 自动驾驶域控制器搭载美光车规级产品组合
如今,不论是驾驶者还是乘客,都追求更为舒适的行车体验。为适应汽车行业ACES趋势(智能化、网联化、电动化和共享化),满足未来需求,汽车制造商们正在重塑行车体验。 最近的一个例子无疑就是全新的L9,它是理想汽车于2022年6月底在北京推出的、专为家庭打造的全尺寸智能旗舰 SUV 车型 。L9配置有三块 15.7 英寸 3K分辨率的 OLED 显示屏、全舱语音和手势指令系统、大尺寸高清 HUD(平视显示器)和高级驾驶辅助系统 (ADAS)。这样一款功能丰富的汽车,其背后究竟采用了怎样的技术支持这些系统?让我们一探究竟。 美光车规级 LPDDR5 和 UFS 3.1 助力实现 ADAS 功能 随着汽车功能变得
[汽车电子]
理想 L9 与德赛西威 <font color='red'>IPU</font>04 自动驾驶域控制器搭载美光车规级产品组合
腾讯云上的IPU预览正式推出,Graphcore公有云大批量部署进行中
2022年5月19日,中国北京——今日,Graphcore®(拟未)携手腾讯云,正式发布腾讯云公有云上的IPU预览,为广大人工智能创新者提供腾讯云上的IPU即刻使用服务。这是继金山云之后,Graphcore与中国大型公有云提供商提供云上IPU产品的又一个里程碑,体现了中国公有云市场对于IPU系统持续增长的需求以及对Poplar®软件易用性的认可。 目前,腾讯云公有云上的IPU预览部署了Bow Pod4、Bow Pod16、IPU-POD4和IPU-POD16四种机型,支持自然语言处理、计算机视觉、推荐、概率等经典机器学习模型,以及稀疏运算、ViT、GPT、GNN等创新人工智能负载,支持训练和推理。腾讯云的现有客户,可以直
[网络通信]
腾讯云上的<font color='red'>IPU</font>预览正式推出,Graphcore公有云大批量部署进行中
小广播
最新物联网文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved