安霸AI域控制器CV3解析:算法优先、为融合优化、可裁剪扩展

发布者:EEWorld资讯最新更新时间:2022-01-14 来源: EEWORLD关键字:安霸  AI  域控制器 手机看文章 扫描二维码
随时随地手机看文章

“自2004年成立以来,我们一直专注于数字视频应用,始终以视频是一种独特的数据类型为前提,优化芯片架构并引入先进的软硬件技术及人工智能技术。”近日,安霸CEO 王奉民在2022安霸投资者峰会时如此说道。


回顾安霸的发展历史,前12年是为消费、安防市场及汽车市场提供低功耗高分辨率的视频处理SoC,而在过去的5年间,通过开发带深度神经网络AI处理器的SoC,与现有的视频技术相结合,从而推动CV(计算机视觉)SoC的发展,促进多个行业的高水平智能化发展。


而现在,通过引入CV3架构以及收购Oculli,安霸正在将处理器应用到视频之外的市场,这一切将引领安霸达成年营业额超10亿美元的目标。


2014年至2015年,随着Gopro的上市,安霸迎来了历史性的突破,其股价也随之一飞冲天,然而Gopro后期发展不利以及安防市场受到更多竞争对手的冲击,安霸经历了一段的蛰伏期。好在公司于2015年第一个鼎盛期时,就收购了自动驾驶研发团队Vislab,并从此开始投入巨资进行汽车ADAS及AD技术的研发。伴随着2021年底,收购毫米波雷达领军厂商Oculli之后,标志着安霸在计算机视觉与毫米波雷达等多传感器融合技术上实现了更大突破。


而在2022年CES上,安霸发布了最新AI域控制器芯片CV3系列,标志着公司从边缘智能向智能域控制器迈出了重要一步。


算法优先的玩法


安霸中国区总经理冯羽涛表示,尽管安霸是一家芯片供应商,但公司始终秉承着算法优先的策略,尤其是考虑到如今AI算法仍然在演进过程中,开发一款可以承载当前及今后算法的硬件非常重要。安霸中国区市场营销副总裁郄建军也表示,在CV3的开发过程中,测试了成百上千种的开源算法,甚至整个芯片的开发都是围绕着通用型算法进行的优化,这也是安霸算法优先的重要内涵。比如Transformer神经网络突然近两年变得流行,在CV3的开发过程中就对其进行了专门的支持与优化。


冯羽涛例举了安霸在算法技术上的四大优势。


首先是图象处理、ISP和视频压缩编码算法,这也是安霸自成立以来始终保持的优势。在AI技术火热之前,计算机视觉最依赖的就是图像与视频的处理。


第二是自动驾驶相关算法。2015年收购VisLab之后,安霸就开始深入了解自动驾驶中的算法,并与芯片进行深度融合。


image.png

如图所示,与CV相关的研发逐年提升


第三是随着收购傲酷,安霸补充了大量毫米波雷达与融合算法的knowhow,冯羽涛表示,傲酷有70%以上的工程师都是算法及软件相关开发人员。郄建军表示,傲酷采用了非常独特的算法,只需要普通雷达、简单的天线以及并不复杂的处理,就可以实现高性能的4D成像雷达,而随着双方合并,安霸可以更好地支持4D成像雷达算法以及与视觉传感器的前端融合。“目前的融合算法更多是后融合或目标级融合,而在CV3中支持视频像素和雷达点云做原始数据级融合,这可以大幅减少误检率,从而提高整体的可靠性,甚至达到低线束激光雷达的精度。”郄建军说道。


第四是CVflow®,冯羽涛介绍道,CVflow是所有CV系列芯片的核心,也是安霸自研的一套AI算法加速硬件引擎。CVflow架构是专用于神经网络算法运算而设计的,因此相对于CPU、GPU或者FPGA,在ADAS感知融合算法处理上具有更高的算力和更低的功耗。


有效算力才是工程学


冯羽涛介绍了全新一代CV3的具体指标,并强调在安霸看来“有效算力才具有工程价值”。


首先他强调的是CV3面向的是域控制器,因此相比CV2,CV3可以支持包括传感器融合以及规控等在内的多项功能。从适用于前视ADAS摄像头、满足汽车行业监管标准的低功耗SoC,扩展到可用于L4级全自动驾驶的高端域控制器SoC。这个系列的芯片支持中央架构,也支持区域架构。除了覆盖整个自动驾驶域外,CV3还可以同时处理舱内感知,包括驾驶员和车内感知系统。安霸的AI视觉SoC提供了独具特色的全系列产品,支持从ADAS辅助驾驶系统到L4级自动驾驶系统,涵盖汽车感知、记录和规控的全方位应用。这意味着主机厂无需为其旗下不同等级的汽车产品线开发不同的软件,而直接采用安霸统一的CVflow平台开发,不仅大大缩减设计制造成本,还能够更快速地投向市场以满足市场需求。

image.png

CV3框图

image.png

CV2FS框图


冯羽涛表示,CV3架构最主要的升级是采用了新一代的CVflow架构,包含神经矢量处理器和通用矢量处理器两部分,充分考虑了客户的算法需求。其中神经矢量处理器主要支持定点计算,包括4bit、8bit、16bit等AI算法。而通用矢量处理器可以应对客户的混合算法需求中浮点运算的需求,比如毫米波雷达的点云处理,OpenCV处理,或者帮助Cortex A78AE分担浮点算法等。


另外一部分更新是采用了16核Arm Cortex A78AE处理器,支持汽车功能安全,并采用4*4的簇架构,可以灵活选择安全域控制,神经网络,融合算法或者是冗余开发等应用,使软件开发相对独立。


而集成诸多处理器功能的AI域控制器,相对于传统的层级架构的域处理来说,可以实现更低的延迟,从而满足ADAS对于低延迟处理的需求。


冯羽涛强调,安霸始终认为有效算力才是真正有意义的算力,在满足能效比前提下发挥最佳处理水平,才可以满足车厂的要求,而不只是单纯的堆积处理器内核和算力。也正因此,安霸在CV2时代就引入了eTOPS(等效算力)的概念。而全新发布的CV3系列,其AI等效算力达到了500 eTOPS(@8bit)或者1000 eTOPS(@4bit),是上一代CV2的42倍之多。


第三,则是通过增加MIPI CIS-2接口,以及MIPI DSI,可以支持包括20路摄像头、毫米波雷达、激光雷达以及超声波雷达在内的所有传感器,从而达到最全面的传感器融合。


image.png

与竞争对手相比,CV2 12eTOPS的算力情况下,就可以实现竞争对手GPU 30 TOPS的性能。


image.png

如图所示,安霸的产品线覆盖相比竞争对手更为全面,最重要的原因就是公司始终秉承着可以应对不同应用,而为了对应用进行进一步优化,全新的CV3也将进行各种裁剪或补充。


image.png

如上图所示,安霸一直是依靠各种细致的优化与裁剪,从而满足工程化的不同要求,以服务于不同厂商的需求。


冯羽涛表示,安霸平台的设计思路就是在通用编程适应性和功耗比两方面进行平衡,哪些需要通用处理,哪些需要专用架构,哪些需要以软件支持,哪些需要固化,这一切的取舍,完全建立在安霸“算法优先”的knowhow上,从而实现性能、功耗、成本、开发便捷度之间取得好的平衡点。


“做一颗高算力的产品很容易,只要放进更多核就好了。但更重要的是需要落地,需要综合工程学的需求,这才是最难的。”冯羽涛说道。


通过融合工程学的所需,按照冯羽涛所述,该产品“既可以支持传统算法,也可以支持神经网络算法,既可以支持多级式传感器融合,也可以支持直接在域控制器下处理所有原始数据,这一切均取决于客户对于自动驾驶的理解。”,但在安霸看来,未来几年内,域控制器市场还是以混合式的为主导。


image.png

如此图所阐释,TOPs(算力)很好但是没意义,效率才是最重要的,为此CVflow通过特殊的流架构(Streaming architecture),稀疏矩阵以及无需更多内核的方式实现了高效率,并简化了内存带宽、内核数量以及无效的大量内部数据搬运及通信,并且专注于摄像头和雷达的数据处理,而不是为了满足通用的处理应用。


在这一前提下,CV3除了性能提升之外,性能能效比也同时提升了4倍。冯羽涛表示,“我们真正做到了用这颗50W的芯片,替代了后备厢里庞大的数据中心。”


image.png

如图,安霸真正将“轮子上的数据中心”小型化到只有数个蓄电池大小的计算单元。


据悉,CV3将采用三星的5nm制程,这一工艺已经在安霸CV5产品上得到了量产验证。


广泛的合作伙伴


目前,硬件预埋已经是诸多车厂的策略,即硬件先做到L4级标准,软件和算法则通过迭代方式,从L2+、L3等慢慢做起来。所以安霸才会推出如此高起点的CV3平台,从而保护车厂的投资。


从2019年算起,安霸已经连续同多家本土车厂、Tier1或算法中间件厂商合作,加速自动驾驶技术的落地。


image.png

安霸的OEM、Tier1以及软件合作伙伴生态一览


也正是由于同更多的汽车及IoT合作伙伴合作,使安霸如今已经彻底摆脱了对于Gopro单一品牌大客户的依赖,这也是安霸执行“算法优先”以及平台化策略的最重要原因与成果。


自动驾驶技术正在进入全面的爆发期,除了通用自动驾驶之外,包括商用车、重卡、机场、物流等多种场景也都在加速落地,而通用自动驾驶各家的演进路线图不同。冯羽涛表示,“在这样复杂的背景下,安霸作为芯片供应商,始终保持对趋势的准确判断,通过长期产品规划,秉持着算法优先的策略,设计出高性能的产品架构,以及多样化的平台方案,不断配合汽车产业的发展需求。”

关键字:安霸  AI  域控制器 引用地址:安霸AI域控制器CV3解析:算法优先、为融合优化、可裁剪扩展

上一篇:电动车续航破千:硅负极已经压了固态一头?
下一篇:冷观碳化硅“上车”热潮

推荐阅读最新更新时间:2024-11-12 02:51

人工智能+大视觉成IoT新风口,瑞芯微推智慧视觉平台RK1108
    集微网消息,10月13日,中国芯片厂商瑞芯微Rockchip在香港秋季电子展正式发布“智慧视觉开发平台——RK1108,该芯片内嵌DSP,具有智能图像处理等关键技术,在嵌入式系统中实现了高能效智能视觉和图像感知的革命性进化。 瑞芯微RK1108具备强大的开放性和可编程,可为合作伙伴提供多样化的产品思路和方向。可广泛应用于汽车、安防监控、家用辅助机器人、运动相机、无人机等领域。 官方资料显示RK1108具有五大技术特性: 1、功能强大的DSP:内嵌CEVA XM4视觉处理器DSP,最高可达600MHz。 2、微光夜视成像:专业的图像处理单元。 3、高性能编码器:2K/H.264,高画质低码率。 4、多功
[手机便携]
砍掉移动手机业务 微软一心向AI
  本月11日,曾经的第三大手机系统,Windows Phone停止主流支持服务,这一仍有数百万人在用的平台不再收获任何系统更新。下面就随网络通信小编一起来了解一下相关内容吧。   你可以说 微软 还有Windows 10 Mobile在顶着,也可以说还有传言中的Surface Phone,但如今,一切都将化为泡影。   据WMPU报道, 微软 在提交给美国证券交易委员会(SEC)的文件中明确表明,移动手机业务已经从公司旗下砍掉,取而代之的是把资源投向 AI (人工智能)。   此前 微软 对公司的定位是移动优先、云优先。对比之前的雄心,实在是让人唏嘘。   从这个角度窥探,传言中的“革命性”手机即使发力,预计方向也是 AI ,
[网络通信]
这家神秘公司欲造新型AI:通过人工遥控学习
据国外媒体报道,一家名为Kindred AI的神秘加拿大创业公司在利用人工虚拟现实“向导”来教导机器人执行新任务。它的最终目标是创造一种新型的人工智能技术。 通过给机器人配对佩戴虚拟现实头盔和手握运动追踪控制器的人类“向导”,Kindred教导它们如何超快速地执行相对棘手的灵巧型任务。 该技术让人们可以一瞥未来人类可以如何跟机器同步协作,展示如何通过利用人类的能力来强化自动化系统的功能。尽管业界普遍担忧机器人和人工智能将会抢走人类的工作岗位,但还有很多事情机器还是无法胜任。该公司上周向《麻省理工科技创业》(MIT Technology Review)展示了该项技术,称计划未来几个月推出一款面向零售商的产品。它的长期雄心甚至更为宏
[机器人]
人工智能的发展呼唤人类的理性与善良
  伴随着现代科技的发展,人类面对人工智能的态度表现得何其纠结与矛盾:一方面,人类在人工智能身上寄予的期望值超乎想象,但凡是人类所能想到的,凭借自身条件目前还无法实现的“超能力”,都被嫁接成为人工智能的标配能力;另一方面,人类又因人工智能而感到恐慌,臆断的危机感迅速膨胀,不断地给被“超能力”化的人工智能冠以“人类终结者”的“虚名”。   基于如此复杂的情感,人类关于人工智能发展的争议也变得愈演愈烈。那么,人工智能的发展到底该何去何从?作为一个不断成长中的科技宠儿,人工智能呼唤人类母亲的理性与善良。    呼唤理性:主观臆断并非“我”本意    日前,一项关于利用人工智能判断人类长相与犯罪的联系的研究引起了大家的争议。   国内
[机器人]
大西洋月刊:中国成为全球人工智能领域焦点选手
两个月前,一年一度的AI研究者的盛会AAAI(国际人工智能协会)遭遇了一次时间上的“破坏者”——中国春节,现任AAAI(国际人工智能协会)主席Subbarao Kambhampati 向The Atlantic(《大西洋月刊》)杂志记者讲述了这次“突然袭击”:“因为年会时间与中国新年冲突,我们面临着‘如期举行但可能没有中国参会者’或者‘改期以错开中国新年假期’,但其实我们很快就做出了改期的决定。”最终,AAAI年会改期举行。 据外媒推测,作为全球人工智能领域最重要的学术性会议之一,AAAI今年的因与中国春节冲突而改期不再是一次特列,未来,全世界都要配合中国时间。当中国人工智能研究者被各个国际AI盛会视作不可或缺的嘉宾时,当在本届
[嵌入式]
从540亿个晶体管的安培架构,解密英伟达的人工智能野心!
今日,英伟达CEO黄仁勋发表了GTC 2020演讲,由于疫情的影响,此次演讲改为线上发布的形式,但是却丝毫没有影响今年英伟达的产品布局和未来发展。 黄仁勋在2019年的时候曾表示,人工智能将推动长期需求,因为它是“我们这个时代最强大的单一力量”。2017年的时候已经有2000家人工智能初创企业与英伟达达成了合作,2019年的时候这一数字达到了4000家,今年这一数字还在稳步的增长。 全新Ampere(安培)到来 正如此前所预计的一样,黄仁勋在此次演讲中介绍了全新的Ampere(安培)架构,这一架构用以替代使用了接近两年的伏特(Volta)架构。 值得注意的是,全新的Ampere(安培)架构主要用于人工智能,数据中心等专业用途,而不
[手机便携]
人工智能风口已至,哪些企业谁将占领先机?
中国已经成为当今世界最具创新活力的市场,特别是科创板的推出,物联网、 人工智能 和生物科技为核心的创新企业发展释放潜力,并有望得到快速扩张。各界积极备战因新经济所释放的资本红利,在资本市场以5G、AI、IoT和生物科技的创新代表性企业,将成为受到市场青睐和追捧。 在全球市场,以AI+IoT为核心的转型企业得到迅猛发展。特别在AI+IoT等新技术融合下,物联网高级顾问杨剑勇指出,围绕机器视觉、自动驾驶、高端制造、AI芯片和生物科技创新企业迎来前所未有机遇,涌现出包括优必选、图灵机器人、旷视科技、欧瑞博、地平线、思必驰、碳云智能与海尔生物医疗在内等创新和新业态企业,利用AI+IoT助推机器人和智能家居进入千家万户,同时助推
[嵌入式]
<font color='red'>人工智能</font>风口已至,哪些企业谁将占领先机?
GelSight和Meta AI推出Digit 360触觉传感器
据外媒报道,触觉智能技术先驱GelSight和Meta AI宣布推出人工指尖状触觉传感器Digit 360,可通过以人类级别的精度数字化触摸来提供丰富而详细的触觉数据。Digit 360将扩大触觉传感研究领域,标志着GelSight和Meta AI之间的合作关系进入下一阶段。此前,两家公司2021年就合作推出Digit触觉传感器。 Digit 360是一种指尖状触觉传感器,配备超过18种传感功能,将推动触觉研究的进步,并允许研究人员组合各种传感技术或分离单个信号以深入分析每种模式。这种新型触觉专用光学镜头可以看到人造指尖周围的印记,捕捉到接触物体表面的更多敏感细节。随着时间的推移,研究人员可以使用Digit 360开发能
[汽车电子]
GelSight和Meta <font color='red'>AI</font>推出Digit 360触觉传感器
小广播
最新汽车电子文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved