Meta与NVIDIA联合打造大型AI研究超级计算机

发布者:EE小广播最新更新时间:2022-01-26 来源: EEWORLD关键字:Meta  NVIDIA  AI  超级计算机 手机看文章 扫描二维码
随时随地手机看文章

Meta的AI超级计算机是迄今为止最大的NVIDIA DGX A100客户系统。该系统将为Meta的AI研究人员提供5百亿亿次级AI计算性能,采用了最先进的NVIDIA系统、InfiniBand网络和软件,实现了数千个GPU集群的系统优化。

 

image.png


Meta Platforms充分认可NVIDIA,为其有望成为有史以来最强大的研究系统选择了NVIDIA的先进技术。


于今日发布的AI研究超级集群(RSC)已在训练新模型以推动AI发展。部署后,Meta的RSC预计将成为最大的NVIDIA DGX A100客户系统。


image.png


Meta在一篇博客文章中表示:“我们希望RSC帮助我们建立全新的AI系统,例如可以为多个不同语言的团队提供实时语音翻译,使他们可以在研究项目上无缝协作,甚至一起玩AR游戏。”


训练最大的AI模型


当RSC在今年晚些时候完全建成时,Meta将用它来训练具有超过1万亿个参数的AI模型。这将推动自然语言处理等领域的发展,比如实时识别不法内容等工作。


除了实现规模性能之外,Meta还将超高的可靠性、安全性、隐私性以及处理“各类AI模型”的灵活性作为RSC的关键指标。

 

Meta的AI研究超级集群拥有数百个NVIDIA DGX系统并通过NVIDIA Quantum InfiniBand网络相连接,助力Meta AI研究团队提高工作速率。


性能大揭秘


目前,此全新AI超级计算机已经部署了760个NVIDIA DGX A100系统作为其计算节点。共有6080个NVIDIA A100 GPU,通过NVIDIA Quantum 200Gb/s InfiniBand网络连接,可提供1895千万亿次TF32计算性能。


尽管受到新冠疫情的影响,这样一台可运行的AI超级计算机从想法到实现,RSC仅用了18个月! “功臣”之一便是采用NVIDIA DGX A100技术作为基石。


Penguin Computing是NVIDIA合作伙伴网络中负责RSC交付的合作伙伴。除了760个DGX A100系统和InfiniBand网络之外,Penguin还为Meta提供管理服务和AI基础架构优化,包括一个46PB高速缓存的Altus系统。

性能提升20倍


这是Meta第二次选择NVIDIA技术作为其研究平台的基础。2017年,Meta打造了第一代AI研究基础架构,配备了22000个NVIDIA V100 Tensor Core GPU,每日可处理35000项AI训练工作。


Meta的早期基准测试显示,RSC训练大型NLP模型的速度比之前的系统快3倍,运行计算机视觉工作的速度比之前的系统快20倍。


在今年晚些时候的第二阶段,RSC将扩展至16000个GPU。Meta认为届时RSC将提供高达5百亿亿次级混合精度AI计算性能,并且Meta希望通过扩展RSC的存储系统,以每秒16TB的速度提供高达1EB的数据。


可扩展架构

NVIDIA AI技术适用于任何规模的企业应用。

NVIDIA DGX包含一个完整的NVIDIA AI软件栈,可以轻松地从单个系统扩展至完整的DGX SuperPOD,可以在本地或主机托管商处运行。客户亦可以通过NVIDIA DGX Foundry租用DGX系统。


关键字:Meta  NVIDIA  AI  超级计算机 引用地址:Meta与NVIDIA联合打造大型AI研究超级计算机

上一篇:Pickering推出新款高电压LXI可扩展矩阵平台 尺寸最大300x4
下一篇:德承全新嵌入式工业电脑DI-1100 进驻智能工厂多元应用

推荐阅读最新更新时间:2024-11-16 21:44

大联大品佳集团推出基于NXP i.MX8QM的AI影像辨识与车辆识别方案
大联大控股 宣布,其旗下品佳推出基于恩智浦(NXP)i.MX8QM的AI影像辨识与车辆识别方案。 当今社会正逐渐发展成为一个以多媒体为中心,并且高度依赖数据和自动化的经济体系。而汽车产业作为体系中重要的一环,在众多科技的推进下,也正经历着前所未有的智能化升级。随着自动驾驶和辅助驾驶技术愈发成熟,如何帮助客户开发AI应用程式成为新的课题。 由大联大品佳推出的基于NXP i.MX8QM的AI影像辨识与车辆识别方案,采用eIQ 2.0软件开发环境,整合了多家不同算法并提供对应的API供客户开发使用。本方案核心的芯片i.MX8QM可以稳定处理影像辨识、机器学习、资料运算等复杂且沉重的资源消耗。 图示1-大联大品佳推出基于NXP
[汽车电子]
大联大品佳集团推出基于NXP i.MX8QM的<font color='red'>AI</font>影像辨识与车辆识别方案
英伟达助力自动驾驶实现L5级
9月26日,全球知名半导体厂商英伟达(NVIDIA)在京举办了2017 GTC大会(GPU Technology Conference)。在26日上午的主题演讲环节,英伟达联合创始人、CEO兼总裁黄仁勋介绍了这家半导体企业在自动驾驶软硬件平台、开发工具和合作伙伴关系方面的最新进展。 在演讲的开始阶段,黄仁勋提到了近年来摩尔定律失灵的现象。“设计人员已经无法再造出可以实现更高指令级并行性的CPU架构。”黄仁勋说道,“晶体管数每年增长50%,但CPU性能每年仅增长10%。” 而与之相对的,则是GPU的崛起。随着人工智能与深度学习技术的发展,由GPU驱动的计算正在包括大数据、医疗、翻译、智慧城市、自动驾驶、教育等各个领域得到应用
[汽车电子]
邓中翰:中国芯片如何决胜人工智能时代?
《意见领袖》专访中国工程院院士,“星光中国芯工程”总指挥,中星微电子集团首席科学家 邓中翰 文字实录 邓中翰,中国工程院院士,“星光中国芯工程”总指挥,中星微电子集团首席科学家。他是我国大规模集成电路芯片系统设计技术及产业化的主要开拓者之一,曾率领中星微电子公司成为我国第一家在美国纳斯达克上市、具有自主知识产权的芯片核心技术设计企业,彻底结束了中国无“芯”片的历史,并第一次将“中国芯”大规模打入国际市场,这些产品被苹果、三星、索尼、惠普、联想、华为等企业采用,占领了全球计算机图像输入芯片市场60%以上的份额,也使我国集成电路芯片第一次在一个重要领域达到全球领先地位。他被誉为“中国芯之父”。 张媛:谢谢邓院士接受我的采访,其实看到您
[嵌入式]
爱芯元智亮相ICCAD 2021:详解自研芯片AI赋能ISP提升画质
随着产业智能化的深入,集成电路市场规模迎来新一轮上升趋势,其中AI芯片已成为引领产业增长的主流方向之一。12月22日-23日,中国集成电路设计业2021年会暨无锡集成电路产业创新发展高峰论坛(ICCAD 2021)在无锡太湖国际博览中心开幕,爱芯元智半导体(上海)有限公司受邀参会。公司ISP负责人、系统架构师张兴出席“IP与IC设计服务”专题论坛,并发表了以AI成像为主题的演讲,详细介绍了AI赋能对图像、视频画质提升的重要作用和技术原理。 不止于算法 爱芯元智两大核心技术拓展行业“天花板” 公开资料显示, 爱芯元智 是一家专注于 AI视觉技术研发及基础算力平台公司 ,2019年5月成立后,仅用9个月时间便流片成功,
[嵌入式]
爱芯元智亮相ICCAD 2021:详解自研芯片<font color='red'>AI</font>赋能ISP提升画质
英特尔:边缘计算叠加人工智能,加速物联网垂直行业变革
(电子网/消息)“从我对整个技术趋势判断来看,物联网的发展有两个非常重要点:一个是边缘计算,另一个是人工智能。我们认为这两方面相互之间的协同会推动整个物联网技术今后快速的发展,最终实现物联网发展的三个阶段,从互联到智能,从智能到自治。”这是今年11月30日,在第二届边缘计算产业峰会上,英特尔中国区物联网事业部首席技术官张宇对记者表达的观点。 也是在去年的这个时候,由华为、英特尔、ARM 等在内的6家业内最顶尖企业或组织在北京成立了“边缘计算联盟”。据官方介绍,历经短短一年的发展现已拥有154家成员单位,包括来自智能制造、智慧城市、能源电力和ICT行业的领军企业,以及相关领域研究院所和大专院校。 “边缘计算”顾名思义就是强调本地和
[半导体设计/制造]
外媒:字节跳动与博通合作开发 AI 芯片:5nm 制程,台积电制造
6 月 24 日消息,路透社报道,字节跳动正在与美国博通公司合作开发 AI 处理器,以确保有足够多的高端芯片。 知情人士透露,这款 AI 处理器 制程为 5nm ,将由 台积电制造 。虽然设计工作进展顺利,但标志着设计阶段结束和制造开始的 “流片”尚未开始 。 字节跳动和博通一直是业务合作伙伴,博通曾在声明中表示,字节跳动购买了其 Tomahawk 5nm 芯片以及其用于 AI 计算机集群的 Bailly 交换机。字节跳动与博通的合作将有助于 大幅削减采购成本 ,并确保高端芯片的稳定供应。 除抖音和 TikTok 外,字节跳动还运营一个类似 ChatGPT 的聊天机器人豆包, 月度活跃用户达到 2600 万 。 为了推进人工智能,
[半导体设计/制造]
英伟达、宝马争定自动驾驶这块蛋糕,奈何杀出苹果与谷歌
摘要:    战略的确定,取决于哪些科技领域在未来几年最令人关注  从平台与技术的角度出发,这场争夺战有不同的战线  两大可能的聚焦点为 汽车信息娱乐系统 与 自动驾驶 功能   这场争夺战已经开始了。   正如上周 宝马 、英特尔和Mobileye共同宣布,联合建立一个产业标准的开放性自动驾驶平台,预计在2021年实现量产版的上路;一个具有参考性的自动驾驶汽车平台将于 2021 年可上路,战略的确定,取决于哪些科技领域在未来几年最令人关注。   一方面,世界上最具价值的 苹果 和 谷歌 两大科技巨头,或隐秘或公开,借力于自身的软件实力与和用户体验技术致力于创建自驾平台,甚至是汽车平台。另
[嵌入式]
NVIDIA 10纳米芯片曝光 名为Echelon
显卡频道1月8日 国内硬件网站PCINLIFE的管理员cho于昨日在论坛上公布了一些NVIDIA于几个月前在斯坦福大学展示用的幻灯片,展示了NVIDIA ExaScale计划的核心——Echelon的具体芯片示意图和具体架构等。 从图上可以看出,Echelon芯片和之前我们报道的相似,各个SM模块独立命名为"NoC"(Network on Chip)通过内部界面,经由L2 Cache和内存控制器与其他SM相互连接。有所不同的是,去年在美国西雅图举行的SC10超级计算大会上NVIDIA首席科学家Bill Dally透露的Echelon含128个SM模块,而在这里变成了256个。 其余指标大致相同,每个SM模块里面
[嵌入式]
<font color='red'>NVIDIA</font> 10纳米芯片曝光 名为Echelon
小广播
最新工业控制文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved