苏黎世跑分能代表处理器的AI性能吗?

发布者:JoyfulHearted最新更新时间:2020-04-21 来源: 爱集微关键字:AI 手机看文章 扫描二维码
随时随地手机看文章

       随着手机端加入了越来越多的AI运算,AI性能已经成为手机处理器的一大关键性能指标。近期我们注意到,一款测试工具频繁出现在公众视线中:ETH AI-Benchmark,也就是我们常说的苏黎世跑分。一些处理器厂商经常会援引苏黎世跑分的测试数据,用以展现其AI性能的强大。但苏黎世跑分真能代表处理器的AI性能吗?

  苏黎世跑分其实和大家所熟知的安兔兔、GeekBench等跑分软件类似,不同的是,苏黎世跑分是专门针对AI性能的一款跑分软件,它通过对象识别、人脸识别、图像去模糊等共9大测试项的测试,根据不同测试项的重要程度不同,匹配不同的权重,最终得出一个表征AI性能的分数。

  苏黎世跑分客观吗?

  -16位浮点运算占比过大 严重脱离实际AI应用特点

  这是目前最新的苏黎世跑分数据:

  我们截取出了2020年颇具代表性的两大平台麒麟990 5G和骁龙865的苏黎世跑分成绩。其中,麒麟990 5G得分为70185,骁龙865得分29724,骁龙865在总分上落后麒麟990 5G一大截。但分别对比各个测试子项,骁龙865却在绝大多数项目上都取得领先。唯独在FP16子项大幅落后于麒麟990 5G。这是为什么?FP16指的是什么?

  ▲苏黎世跑分各测试子项的占比分配图

  FP16指的是16位浮点运算,在苏黎世跑分测试子项的占比中,FP16占到了48%(浅蓝色部分),是整数运算(橙色部分)的2倍。

  我们再对应实际的AI运算场景来看一下。上图列举了手机中主要AI应用中的详细运算类型,如:拍照中的防抖、降噪、HDR…视频拍摄中的慢动作、降噪、帧率转换等均是整数运算。全部的AI场景中,FP16浮点运算参与的比重非常小。

  也就是说,实际AI应用中,大多数使用的都是IN8、INT16整数运算。苏黎世跑分中,FP16浮点运算48%的比重分配可能严重脱离了实际。

  -缺乏对平台SDK的专门适配

  需要注意的是,无论哪一款AI测试工具,都需要适配平台芯片的SDK(软件开发工具包),才能测试出芯片真实的AI能力。

  这里需要介绍一下的是,安卓平台有一个基础SDK,叫做Android NN API。但为了方便厂商在平台上进行快捷开发与适配,平台商都会推出自己的SDK。苏黎世跑分采用的是Android NN API。但实际上,以骁龙平台为例,该SDK在骁龙平台的厂商中使用率非常低。数据显示:高通平台各厂商中使用骁龙SDK的比例为94%,而使用Android NN API的比例小于1%。

  苏黎世跑分不支持骁龙SDK,因此在测试中并不能发挥出骁龙平台的全部AI性能,得出的数据并不具备参考意义。

  -苏黎世跑分可信度存疑

  在苏黎世跑分官网的排行榜中,2020.2.24显示麒麟990 5G的得分为52403,而在2020.3.31其得分就改为了70185。具体的原因我们暂未可知,但我们猜测苏黎世跑分可能对测试子项的比重做出了调整或增加了对麒麟990 5G平台的一些新的支持。

  苏黎世跑分的标准可能还未完全确定,仍在持续调整中。

  该如何了解处理器的AI性能?

  值得一提的是,各大厂商在发布移动处理器时,几乎都会以TOPS(Tera Operation Per Second,万亿次/每秒)为单位,公布理论AI性能。比如骁龙865为15TOPS,天玑1000为4.5TOPS,这就是其理论的AI算力,而麒麟990 5G并未公布过此项数据。理论AI算力为官方数据,可以作为评定其AI性能的主要参考。

  而国内知名的测试平台安兔兔和鲁大师也分别推出了AI专项测试工具:安兔兔AI评测和鲁大师AImark。

  安兔兔AI评测是通过各厂商提供的SDK将原始神经网络转化为厂商所支持的神经网络,再通过图片分类、对象识别测试项对处理器AI性能做评定。

  鲁大师AImark使用的则是目前较为常用的三种神经网络Inception V3、ResNet34、VGG16的特定算法,按照概率高低输出可能的结果列表,最终通过识别速度来判断手机AI性能,进而给出评分。

  而且,安兔兔AI测试和鲁大师AImark均表示:与平台商进行了合作、联调。

  “鲁大师AI评测收到了数百万的测试数据,也与ARM,高通,海思、联发科、三星等AI核心SOC产品供应商进行了测试与调整,从而确定要增加精度系统到原有的评测体系。”___援引自鲁大师官方微博

“高通的SDK名为SNPE、联发科的SDK名为NeuroPilot,海思麒麟的SDK名为HiAI、NVIDIA的SDK名为TensorRT,而三星的SDK目前尚未公布,这些SDK都会在安兔兔AI评测中得以展现。安兔兔通过和上述厂商的合作,建立了统一的标准进行测试。”___援引自安兔兔官网

  鲁大师于日前发布了2020年Q1季度手机AI芯片排行榜,占据榜首的为高通骁龙865,得分112309。这比第二名的苹果A13以及第三名的麒麟990高了近一倍,与苏黎世跑分排行榜形成了强烈反差。

  虽然,目前对于移动平台AI性能的测试,尚未有行业公认的唯一标准。但就从测试子项比重以及平台适配的情况来看,苏黎世跑分不仅严重脱离了实际AI应用特点,而且缺乏对平台SDK的适配。相较而言,鲁大师AImark和安兔兔AI测试则能在更大程度上反映平台的真实AI性能。


关键字:AI 引用地址:苏黎世跑分能代表处理器的AI性能吗?

上一篇:利扬芯片科创板上市申请获受理,致力集成电路测试服务
下一篇:潜望式镜头发展趋势,以后的手机将看得更远

推荐阅读最新更新时间:2024-10-31 17:34

中国抢下人工智能先手棋:位列全球第一梯队 或迎洗牌
  北京、上海、南昌等地火车站启用人脸识别系统,“刷脸进站”仅需3秒;深圳铁路警方组成“机器人警察编队”,为春运保驾护航;12306官网开发图形验证码,定向锁定“黄牛”…… 今年春运,“ 人工智能 ”成了关键词,这是“智慧中国”在社会广泛渗透的一个缩影。下面就随网络通信小编一起来了解一下相关内容吧。   2018年2月3日,服务于青岛北站春运中的智能问询机器人。   2017年8月13日,2017年青少年AI 人工智能 设计大赛在江苏苏州开赛,一名小选手进行赛前调试。     企业数量全球第二 世界创新中心在建    人工智能 :中国抢下“先手棋”   北京、上海、南昌等地火车站启用人脸识别系统,“刷脸进站”仅
[网络通信]
硅谷王者孙正义:人工智能最大的信徒
亿万富翁孙正义,而不是Elon Musk、Jeff Bezos或是扎克伯格,对人工智能驱动的乌托邦有着最大胆的愿景。他为此花费了数千亿美元。 在加利福尼亚州圣卡洛斯一个明亮的九月早晨,我和软银公司董事长孙正义一起与Vision Fund的人见面,他将1000亿美元当作其发展的赌注。他一直是积极的交易者,在将软银打造成电信集团近40年之后,在两年前发起了这一史无前例的投资,以支持新一轮数字革命的初创企业。他把一切都押在这项投资上——他的公司、名誉以及财富。我们都带着同样的疑问来到这里:这项投资未来将去向何方? 这是Vision Fund特别忙碌的一天。因为该团队正准备宣布其数十亿美元的新投资:为印度酒店业初创企业Oyo进行一轮10亿
[机器人]
边缘 AI 与云的融合:为您的 AI 战略做出正确选择
在不断发展的技术格局中,人工智能 (AI) 是推动各行业创新的关键力量。从彻底改变医疗诊断到改变金融服务和工业 4.0,人工智能的影响深远而深远。然而,随着人工智能能力的不断扩展,一场新的争论出现了:边缘还是云? 虽然云计算一直是 AI 开发和部署的支柱,但创新的未来正日益在边缘形成。边缘 AI 具有实时处理和降低延迟的潜力,为智能设备和物联网 (IoT) 的发展提供了无与伦比的机会。 边缘与云 随着对实时数据处理和低延迟响应的需求不断增长,边缘 AI 与云计算之间的争论也愈演愈烈。云计算提供了巨大的计算能力、可扩展的资源和集中式数据存储。然而,云计算的集中式特性引入了延迟问题,并且依赖于稳定的互联网连接,这可能会限
[嵌入式]
边缘 <font color='red'>AI</font> 与云的融合:为您的 <font color='red'>AI</font> 战略做出正确选择
传华为P11宣传图流出:异形屏+人工智能提升
12月19日消息,近日随着MWC2018大会的临近,有关华为明年上半年新旗舰P11的消息也越来越多。就在最近,有一张华为P11的宣传海报在网上流出,这张海报也基本确认华为P11将采用异形屏,而拍照依旧是华为手机的重要卖点。 传华为P11宣传图流出:异形屏+人工智能提升(图片来自于weibo)   宣传海报上有“Huawei Fullview Display”的字样,这也意在说明华为P11依旧采用全面屏。同时,手机的额头也保留了摄像头的开孔,与iPhone X的设计非常类似。这名爆料人还提到,华为将进一步的提升P11的人工智能使用体验。   上周国外知名爆料人Roland Quandt在其社交账号上发布了最新的消息,他在今年的华
[手机便携]
“原配”渡鸦不得宠,百度AI靠什么落地?
智能音箱会不会有市场,现在已经无需讨论。因为,智能音箱已经成为现阶段AI技术相对成熟的具象化产物,也是巨头扎堆的AI落地载体。   但是,一旦涉及到硬件,性价比就成了一个绕不开的话题。于是,我们便看到了89元的阿里方糖、79元的京东叮咚mini2以及最近89元的小度智能音箱。一连串不足百元的智能音箱陆续上市,似乎也预示着在国内市场,智能音箱行业正式进入了价格战的阶段。   对于价格战,在竞争激烈之下,谁也没法绕过这个坎。从智能音箱来看,All in AI的百度怕是最有体会的那一个。   “原配”渡鸦不得宠     虽然百度在智能家居领域的发展速度并不快,但是在智能音箱方面百度的脚步却走的并不慢。2017年2月,百度以数千万美元
[嵌入式]
浙江发布人工智能五年规划 2022年核心产业规模超500亿
浙江省政府近日发布《浙江省新一代人工智能发展规划》(以下简称“规划”)。 该规划在浙江省政府召开的第92次常务会议上审议。浙江省省长袁家军指出,人工智能是未来基础研究领域和关键技术运用产业的制高点,是新经济革命的重要力量。 袁家军提出,要聚焦“运算智能、感知智能、认知智能”等人工智能发展阶段,围绕前沿理论、核心技术、支撑平台、创新应用、产业发展等关键领域,依托之江实验室等高端科创平台,组织实施一批重大科研项目。努力打造具备全球影响力的人工智能创新高地。 根据浙江省的规划,力争到2022年,培育20家国内有影响力的人工智能领军企业,形成人工智能核心产业规模500亿元以上,带动相关产业规模5000亿元以上,为浙江人工智能产业领先全国打
[机器人]
欧姆龙作为潍柴合作伙伴亮相潍柴集团智能制造推进大会
近日,潍柴集团首届智能制造推进大会在潍坊成功举办。大会以“自主创新,智造升级”为主题,潍柴集团子公司及中高层等 300 余人前来参观及交流。欧姆龙自动化(中国)有限公司(以下简称“欧姆龙”)作为潍柴重点合作伙伴参与展示。 关于潍柴集团 潍柴是一家跨领域、跨行业经营的国际化公司,在全球拥有动力系统、汽车业务、工程机械、智能物流、农业装备、海洋交通装备等业务板块。2019 年底由工业和信息化部指导的智能制造标杆企业(第一批)评选结果揭晓,潍柴动力成功入选,成为首批 8 家智能制造标杆企业之一。 近年来,潍柴通过智能制造整体战略布局,构建了较为全面的研发、生产、运维体系。基于潍柴特色的 WPS 体系,推动企业持续改进,深化智能制
[嵌入式]
欧姆龙作为潍柴合作伙伴亮相潍柴集团智能制造推进大会
支持多种肿瘤早筛 腾讯觅影已落地七家AI医学影像实验室
  日前,“2017首届国际医疗人工智能大会”在上海举行,多位业界知名的人工智能专家及医疗名家齐聚上海滩巅峰对话。中国人工智能学会常务副理事长杨放春指出,医疗行业的信息孤岛现象非常严重。中国科学技术信息研究所所长戴国强以“人工智能对医疗的意义与价值”为主题进行演讲,他认为人工智能要发挥作用,一是需要科学的数据作为基础,二是共享。下面就随网络通信小编一起来了解一下相关内容吧。    腾讯觅影 应用中心主任吴明柱现场分享了最新的 AI 医学影像产品“ 腾讯觅影 ”,并向与会嘉宾介绍了正在进行的全球首个 AI 医学影像辅助早癌筛查的临床预试验项目,引起了众多医学专家的兴趣。   “利用人工智能和图像识别的技术来辅助基层的医院提高他们的
[网络通信]
小广播
最新手机便携文章
换一换 更多 相关热搜器件

 
EEWorld订阅号

 
EEWorld服务号

 
汽车开发圈

电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2024 EEWORLD.com.cn, Inc. All rights reserved