基于Enclustra瑞苏盈科XCZU15EG核心板及PE1底板

2021-05-17来源: EEWORLD关键字:瑞苏盈科  AI  机器视觉

AI: 机械手石头剪刀布,基于Enclustra瑞苏盈科XCZU15EG核心板及PE1底板


人工智能(AI)正在占据越来越多的应用和生活场景,例如图像检测和分类,翻译和推荐系统等等。基于机器学习技术的应用数量庞大且还在不断增长。采用Enclustra(瑞苏盈科)结合FPGA和ARM处理器的核心板模块,在离线和边缘使用AI前所未有的容易。

 

image.png


为了展示“基于FPGA的AI,机器视觉,运动控制”,Enclustra打造了机械手和人互动玩石头剪刀布的demo。

 

image.png


FPGA低延时、低功耗的特性在这个demo中体现出了优势。搭载Synthara IP核的神经网络运行在基于Xilinx Zynq UltraScale+的Enclustra水星Mercury+ XU7-15EG 核心板模块(SoM based on XCZU15EG)和水星Mercury+ PE1底板,分析摄像头采集的流媒体数据。手势是被实时检测的,每张图片的推理只需要8~9 ms,灵敏度超过100 fps。常见的摄像头为30或者60 fps,所以瓶颈在于摄像头的帧率。机械手伺服电机根据游戏规则做出反应。

 

image.png


值得一提的是这个demo实现了在单个设备中处理各种传感器和信号:图像处理、神经网络推理、机械手都在一个FPGA中被控制。


image.png

image.png


玩家手势的图片被分为5类:石头,剪刀,布,非法手势,无手势。为了让神经网络能对图片进行精准的分类,Enclustra从几位玩家录制的视频中采集了多样化的图片:不同的玩家,男/女玩家,不同饰品(手表,腕带,长袖…),不同亮度,左/右手玩家,不同的移动速度,不同的距离,等等。在神经网络学习了近一万张图片后,具备了快速打败新玩家的能力。


关键字:瑞苏盈科  AI  机器视觉 编辑:张工 引用地址:http://news.eeworld.com.cn/DSP/ic535853.html

上一篇:高云半导体宣布发布USB 2.0接口解决方案
下一篇:瑞萨电子推出入门级MPU RZ/V2L

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

Zynq 7015核心板驱动的电动方程式赛车问鼎FS大赛
大学生方程式汽车大赛(Formula Student)是全球最大的工程师竞赛。得益于创新的、基于FPGA模块的电动传动系统,位于瑞士苏黎世的AMZ学生团队成功问鼎这项赛事。AMZ团队的赛车配备了4台基于Enclustra(瑞苏盈科)水星Mercury ZX5核心板(基于Xilinx Zynq 7015 SoC)打造的逆变器,创造了最快圈速。 大学生方程式汽车大赛每年有18场比赛,超过600个学生队伍参加。AMZ (AkademischerMotorsportverein Zürich)赛车队由来自瑞士苏黎世联邦理工大学和瑞士卢塞恩应用科学大学的学生组成,在这项赛事十几年的历史中,由于概念的不断改进和引入创新,如使用
发表于 2021-07-22
<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>Zynq 7015核心板驱动的电动方程式赛车问鼎FS大赛
发布ZU17/19EG高端核心板
2021年6月11日,苏黎世/深圳 瑞苏盈科(Enclustra)仙女座 Andromeda™ XZU90-17EG/19EG: 提供高达686个用户IO的高端核心板Xilinx® Zynq® UltraScale+™ MPSoC 核心板 瑞苏盈科(Enclustra)的仙女座XZU90是仙女座(Andromeda)系列的第一款核心板,针对高端应用进行了模块化和优化设计,支持高达6个Samtec ADM6-60高速连接器,提供高达686个用户IO。仙女座XZU90片上系统(SoC)核心板通过结合Xilinx Zynq UltraScale+™ MPSoC系列芯片和高速DDR4 ECC SDRAM、eMMC
发表于 2021-06-11
<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>发布ZU17/19EG高端核心板
航天发射数据记录仪
测试和测量系统的主要任务之一是记录尽可能多的测量值。在这种情况下,基于FPGA的解决方案的优点(如固有的并行性、极高的带宽、灵活性、对广泛接口的支持以及集成的CPU)就发挥了作用。如果把FPGA核心板模块作为硬件设计的基础,额外的硬件设计通常被简化为开发一个简单的载板,其复杂度低、仅需少量组件。这种方法大大降低了项目风险、开发时间和成本。所有这些都说服了终端客户委托Enclustra瑞苏盈科开发一个数据记录仪来升级现有的测量系统。为了最小化开发时间,Enclustra瑞苏盈科的FPGA专家在进行固件和软件开发的同时,开始了基于Xilinx Zynq UltraScale+ 的 Mercury+ XU8核心板模块的载板的开发
发表于 2021-04-11
航天发射数据记录仪
为东京奥运会提供精确计时器
截至2019年共举办了31届奥运会,其中27届的计时设备都由欧米茄(OMEGA,Ω)提供,今年的东京奥运会将会是第28届。 瑞士计时公司(Swiss Timing)基于瑞苏盈科(Enclustra)的火星Mars ZX2核心板打造了为奥运会等大型体育赛事的计时工作设计的超高精度手持设备PowerTime 3,此设备将会被用于东京奥运会的计时。 说到瑞士计时公司(Swiss Timing)可能大家不太熟悉,但是它的母公司斯沃琪集团(Swatch Group)大家就耳熟能详了。斯沃琪集团旗下有18个手表品牌,其中斯沃琪,天梭,浪琴,欧米茄都是国内很常见的品牌。      
发表于 2021-03-26
<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>为东京奥运会提供精确计时器
Enclustra:极速开启您的FPGA项目
特别有优势;对于大批量产品它也值得考虑——不仅仅是在原型开发过程中。 不要第二次发明轮子 采用FPGA和SoC核心板模块做底板相比购买芯片自行整体设计有很多优势。高产量的FPGA或SoC核心板模块现货降低了它们的成本,同时久经验证的产品保证了高可靠性。由于Enclustra瑞苏盈科不同的核心板模块Pin-to-Pin兼容,因此一个产品后续可以很容易地配备更强大的核心板模块,甚至在开发过程的后期临时更换核心板模块。由于FPGA核心板模块的高功能密度,也降低了底板的复杂性,使其开发速度更快,成本更低。 图1:水星Mercury/Mercury+系列XU5-XU8-XU9核心板(绿色PCB,从左至右
发表于 2021-02-22
Enclustra<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>:极速开启您的FPGA项目
李彦宏:八大AI技术将实现质变,AI芯片是突破点
7月29日,百度创始人、董事长兼CEO李彦宏在29日召开的2021智能经济高峰论坛上表示,在未来十年,人工智能领域将有八项关键技术会实现从量变到质变,从而深刻地改变社会。这八大技术分别是自动驾驶、数字城市运营、机器翻译、生物计算、深度学习框架、知识管理、AI芯片和个人智能助手。李宏彦进一步介绍称,AI芯片是突破“卡脖子”技术重要领域。在中美贸易环境大背景下,一些技术成为卡脖子的关键,虽然各家都在致力于AI芯片研发,但AI芯片技术和市场未来仍处于群雄逐鹿的阶段。李彦宏认为,随着应用场景的丰富,图像、视频的专用芯片,甚至是自然语言理解的专用芯片都有可能出现新的机会。李宏彦表示要在这些方面提早布局,持续投入。实际上,百度这八大方面早已
发表于 2021-07-30
小广播
何立民专栏 单片机及嵌入式宝典

北京航空航天大学教授,20余年来致力于单片机与嵌入式系统推广工作。

换一换 更多 相关热搜器件
电子工程世界版权所有 京B2-20211791 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2021 EEWORLD.com.cn, Inc. All rights reserved