基于Enclustra瑞苏盈科XCZU15EG核心板及PE1底板

2021-05-17来源: EEWORLD关键字:瑞苏盈科  AI  机器视觉

AI: 机械手石头剪刀布,基于Enclustra瑞苏盈科XCZU15EG核心板及PE1底板


人工智能(AI)正在占据越来越多的应用和生活场景,例如图像检测和分类,翻译和推荐系统等等。基于机器学习技术的应用数量庞大且还在不断增长。采用Enclustra(瑞苏盈科)结合FPGA和ARM处理器的核心板模块,在离线和边缘使用AI前所未有的容易。

 

image.png


为了展示“基于FPGA的AI,机器视觉,运动控制”,Enclustra打造了机械手和人互动玩石头剪刀布的demo。

 

image.png


FPGA低延时、低功耗的特性在这个demo中体现出了优势。搭载Synthara IP核的神经网络运行在基于Xilinx Zynq UltraScale+的Enclustra水星Mercury+ XU7-15EG 核心板模块(SoM based on XCZU15EG)和水星Mercury+ PE1底板,分析摄像头采集的流媒体数据。手势是被实时检测的,每张图片的推理只需要8~9 ms,灵敏度超过100 fps。常见的摄像头为30或者60 fps,所以瓶颈在于摄像头的帧率。机械手伺服电机根据游戏规则做出反应。

 

image.png


值得一提的是这个demo实现了在单个设备中处理各种传感器和信号:图像处理、神经网络推理、机械手都在一个FPGA中被控制。


image.png

image.png


玩家手势的图片被分为5类:石头,剪刀,布,非法手势,无手势。为了让神经网络能对图片进行精准的分类,Enclustra从几位玩家录制的视频中采集了多样化的图片:不同的玩家,男/女玩家,不同饰品(手表,腕带,长袖…),不同亮度,左/右手玩家,不同的移动速度,不同的距离,等等。在神经网络学习了近一万张图片后,具备了快速打败新玩家的能力。


关键字:瑞苏盈科  AI  机器视觉 编辑:张工 引用地址:http://news.eeworld.com.cn/DSP/ic535853.html

上一篇:高云半导体宣布发布USB 2.0接口解决方案
下一篇:最后一页

关注eeworld公众号 快捷获取更多信息
关注eeworld公众号
快捷获取更多信息
关注eeworld服务号 享受更多官方福利
关注eeworld服务号
享受更多官方福利

推荐阅读

发布ZU17/19EG高端核心板
2021年6月11日,苏黎世/深圳 瑞苏盈科(Enclustra)仙女座 Andromeda™ XZU90-17EG/19EG: 提供高达686个用户IO的高端核心板Xilinx® Zynq® UltraScale+™ MPSoC 核心板 瑞苏盈科(Enclustra)的仙女座XZU90是仙女座(Andromeda)系列的第一款核心板,针对高端应用进行了模块化和优化设计,支持高达6个Samtec ADM6-60高速连接器,提供高达686个用户IO。仙女座XZU90片上系统(SoC)核心板通过结合Xilinx Zynq UltraScale+™ MPSoC系列芯片和高速DDR4 ECC SDRAM、eMMC
发表于 2021-06-11
<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>发布ZU17/19EG高端核心板
航天发射数据记录仪
测试和测量系统的主要任务之一是记录尽可能多的测量值。在这种情况下,基于FPGA的解决方案的优点(如固有的并行性、极高的带宽、灵活性、对广泛接口的支持以及集成的CPU)就发挥了作用。如果把FPGA核心板模块作为硬件设计的基础,额外的硬件设计通常被简化为开发一个简单的载板,其复杂度低、仅需少量组件。这种方法大大降低了项目风险、开发时间和成本。所有这些都说服了终端客户委托Enclustra瑞苏盈科开发一个数据记录仪来升级现有的测量系统。为了最小化开发时间,Enclustra瑞苏盈科的FPGA专家在进行固件和软件开发的同时,开始了基于Xilinx Zynq UltraScale+ 的 Mercury+ XU8核心板模块的载板的开发
发表于 2021-04-11
航天发射数据记录仪
为东京奥运会提供精确计时器
截至2019年共举办了31届奥运会,其中27届的计时设备都由欧米茄(OMEGA,Ω)提供,今年的东京奥运会将会是第28届。 瑞士计时公司(Swiss Timing)基于瑞苏盈科(Enclustra)的火星Mars ZX2核心板打造了为奥运会等大型体育赛事的计时工作设计的超高精度手持设备PowerTime 3,此设备将会被用于东京奥运会的计时。 说到瑞士计时公司(Swiss Timing)可能大家不太熟悉,但是它的母公司斯沃琪集团(Swatch Group)大家就耳熟能详了。斯沃琪集团旗下有18个手表品牌,其中斯沃琪,天梭,浪琴,欧米茄都是国内很常见的品牌。      
发表于 2021-03-26
<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>为东京奥运会提供精确计时器
Enclustra:极速开启您的FPGA项目
特别有优势;对于大批量产品它也值得考虑——不仅仅是在原型开发过程中。 不要第二次发明轮子 采用FPGA和SoC核心板模块做底板相比购买芯片自行整体设计有很多优势。高产量的FPGA或SoC核心板模块现货降低了它们的成本,同时久经验证的产品保证了高可靠性。由于Enclustra瑞苏盈科不同的核心板模块Pin-to-Pin兼容,因此一个产品后续可以很容易地配备更强大的核心板模块,甚至在开发过程的后期临时更换核心板模块。由于FPGA核心板模块的高功能密度,也降低了底板的复杂性,使其开发速度更快,成本更低。 图1:水星Mercury/Mercury+系列XU5-XU8-XU9核心板(绿色PCB,从左至右
发表于 2021-02-22
Enclustra<font color='red'>瑞</font><font color='red'>苏</font><font color='red'>盈</font><font color='red'>科</font>:极速开启您的FPGA项目
AI 缺陷检测系统,确保果蔬质量
方案介绍果蔬经过收集、清洗、包装,通过冷链物流配送到各种销售渠道。最终的质量分级和检验决定其价格。传统上,通过自动分级机或人工目测进行分级和检验,质量因素通常包括重量、颜色、大小和外观。因此,这个过程不仅耗时、劳动强度大且费用支出高。特别是,检查员的判断并不总是100%一致。每个检验员都有自己的主观判断,很容易造成评分等级与实际质量之间存在差距。随着AI技术的成熟,传统的人工视觉检测或基于规则的人工智能设备的检测问题可以通过大数据和深度学习算法驱动的人工智能技术来解决。最终,将开发出神经网络模型,大幅提高精度和效率。研华的AIR-101边缘推理系统具有高度稳定的视觉推理计算能力,并配备了两个Intel®Movidius
发表于 2021-06-07
<font color='red'>AI</font> 缺陷检测系统,确保果蔬质量
扎入硬科技棋局耀途资本:AI、射频、3D传感器等广覆盖
16家国内半导体及芯片企业。细究来看,其专注人工智能、物联网、消费电子等领域上游核心半导体元器件及模组投资,涵盖摄像头、3D 传感器、高性能AI处理器、射频通信等领域。
发表于 2021-06-06
小广播
换一换 更多 相关热搜器件
电子工程世界版权所有 京ICP证060456号 京ICP备10001474号-1 电信业务审批[2006]字第258号函 京公网安备 11010802033920号 Copyright © 2005-2021 EEWORLD.com.cn, Inc. All rights reserved