在前面的文章中我们介绍了瑞萨独有的DRP技术是如何工作的,本文将作为DRP-AI系列文章,继续介绍如何基于DRP技术实现工业自动化中的目标物体检测与追踪。
工业生产要实现自动化,必然离不开机器视觉的帮忙。RZ/A2M集成了瑞萨第一代DRP(动态可重新配置处理器)技术,拥有超高性能的图形图像处理能力,相关产品系统框图如下:
图1 RZ/A2M硬件结构框图和产品特色
本文中,我们将重点介绍RZ/A2M在工业自动化领域应用的优势,包括更高的图像处理能力以及超低的功耗。
机械臂之所以能够如此灵活的识别并抓取目标物体,是因为有RZ/A2M独有的DRP模块对机器视觉的图像处理过程进行加速。外接的显示器上可以看到,整个图像处理流程(包括bayer转RGB、波纹校正&白平衡、RGB转二值化图像、寻找轮廓、图像降噪、Bayer转灰阶送显示等)只用了不到3ms,最终达到VGA(640x480)分辨率下60fps的优良性能。
“
如何实现的?
前边介绍了诸多DRP的优势,大家可能对于DRP的使用方法有诸多猜测,可能会担心难以上手。但是!不用担心!瑞萨电子为大家提供了完整的服务,目前我们开发了大约80+个算法库供大家使用,大部分算法库与opencv的库功能相同、接口一致,非常方便即可在一个普通的工程中使用DRP。
图2 CV库和DRP库的切换
下面我们以Bayer转RGB的库为例,看看在使用DRP的时候需要做哪些事情。
首先是函数接口,需要提供的参数包括输入地址、输出地址、图像宽高以及是否使用tinning(在转换过程中可以同时对图像尺寸进行压缩)。
在函数内部,需要先将DRP的库load到DRP硬件中去,g_drp_lib_bayer_binning2rgb这个数组中存放的就是编译好的二进制格式DRP库。我们使用6个Tile并行处理一张图片的方式,因此给6个Tile都load此库。
Load之后,依次给每个Tile计算参数并启动它。由于这里是同一张图裁成6份,所以每个Tile只负责一张图的1/6,因此在这里需要分别计算每个Tile的起始位置和输出位置。计算完毕后下发Start命令让这个Tile开始运行。
最后等待6个Tile全部运算完毕即可。
目前我们可以提供的约50个库都能实现2~80倍不等的性能提升,DRP库对性能的提升普遍在10~20倍之间,10倍以下的库提升效果不明显的原因是这些算法本身过于简单,优化空间太小。以下列举了部分现有的库以及运算能力对比供大家参考。
当然,如果客户有想要的库是我们暂时没有的,也欢迎提出需求,我们会综合考虑后安排到后续开发计划中。
或者,如果客户有一些自有的比较机密的算法想移植到DRP中使用,我们也可以提供DRP库开发的相关培训,手把手教你开发DRP库。
关键字:A2M 工业自动化
引用地址:
RZ/A2M在工业自动化领域应用的优势
推荐阅读最新更新时间:2024-11-17 05:26
机器人行业向新消费领域发展 工业自动化时代或许即将到来
为什么大家都愿意向消费市场拓展?因为消费市场最接近客户,规模最大,最具有想象力的市场! 努力发展的工业企业,都希望通过一款产品冲劲消费品领域,细数全球顶尖级工业品厂商,家电,电器,家用医疗,三菱电器等等都是工业与消费品领域业务并存。 当然从这些企业的发展路径而言,他们有部分企业是先有的消费品领域的业务,而后向工业自动化领域拓展,并成为行业解决方案的巨头。 中国自动化行业的两条路:吸收自研与产业链向上延伸 中国本土工控市场与外资品牌,有不一样的道路,伴随上世纪全球产业转移以及外资工控品牌进入中国,中国本土工业品也开始生根发芽,从模仿到自研,到形成自己的体系,缓慢的搭建了属于中国本土的工控产品的生态圈。
,,工控,
[机器人]
Molex公司将参加2012北美工业自动化全球自动化及制造峰会
(新加坡 – 2012年9月10日) 全球领先的全套互连产品供应商Molex公司将参加2012北美工业自动化(IANA)全球自动化及制造峰会 (Industrial Automation North America (IANA) Global Automation & Manufacturing Summit)。该峰会将于9月10-15日在芝加哥迈考密展览中心(McCormick Place)举办,这个为期一周的活动可为对于全球各地制造运营的成功至关重要的问题提供战略见解,Molex将在E4301展台上展示用于通讯、连接和电源的Brad®自动化连接解决方案。 此外,Molex全球业务经理Rick Griffin预定于9月12日星
[半导体设计/制造]
RFID协议一致性测试系统设计
1. RFID协议一致性测试系统发展现状 近年来,RFID技术得以快速发展,已被广泛应用于工业自动化、商业自动化、交通运输控制管理等众多领域。随着制造成本的下降和标准化的实现,RFID技术的全面推广和普遍应用将是不可逆转的趁势,这也给RFID测试领域带来了巨大的需求和严峻的挑战。负责制订RFID标准的两大主要国际组织ISO和EPCglobal都针对RFID协议一致性测试及其系统设计发布了相关的规范。 1.1 RFID协议一致性测试的相关规范 RFID协议一致性测试规范是随着RFID协议标准的发展而发展起来的,测试规范的目的即确定被测单元的特性与协议标准的规定一致。ISO和EPCglobal都根据已发布的RFID协议标准制订了
[测试测量]
2018罗克韦尔自动化第十年成为世界最具商业道德公司
道德村协会是一家致力于打造和推动商业道德行为标准的领先国际组织,罗克韦尔自动化荣登其 2018 年世界最具商业道德公司榜单。 全球最大的致力于工业自动化与信息技术的公司罗克韦尔自动化公司入选道德村协会评选的 2018 年度世界最具商业道德公司榜单。道德村协会的“世界最具商业道德公司”评选旨在表彰那些影响和推动积极变革、不断提高道德领导力和完善企业行为的杰出企业。此次是罗克韦尔自动化第十次入选此榜单,榜单共有 135 家全球性公司入围。 罗克韦尔自动化总裁兼首席执行官 Blake Moret 表示:“诚信和诚实已融入我们的企业 DNA,我们的员工日复一日地努力践行公司的价值观,如今能够再次得到道德村协会的认可,我为此感到自豪
[嵌入式]
安森美半导体高能效方案赋能机器人创新 助力工业自动化升级
工业自动化简单说来指从人力制造转向机器人制造,涉及信息物理系统(CPS)、()/工业物联网(IIoT)、云计算(Cloud Compung)和人工智能()等多种技术,可实现经济增长和利润最大化,提高生产效率,并避免人力在执行某些任务时的安全隐患。为工业自动化提供全面的高能效创新的半导体方案。
设计人员可采用安森美半导体的无刷直流()控制器实现BLDC电机控制,如高性能第二代单电机控制器MC33035、NCV33035和MC33033 , 或也可采用MC33039进行速度闭环控制。 对于配套的功率器件,安森美半导体提供Power Trench N沟道系列,雪崩电压范围从40 V至150 V甚至更高,具体取决于应用。
[机器人]
解析TI嵌入式处理器最新产品,专为工业自动化而生
如今,无论是德国的工业4.0,美国的“先进制造业国家战略计划”、日本的“科技工业联盟”、英国的“工业2050战略”,还是 “中国制造2025”计划,其目的都是为了实现信息技术与制造技术深度融合的数字化、网络化、智能化制造,在未来建立真正的智慧工厂。现阶段,在制造过程中已经能够提供端到端的透明化,以促进决策优化。工业4.0将会开发出创造价值的新方法和全新商业模式。 布局工业自动化 “我们推出了许多新的嵌入式处理产品,这些产品可以更轻松地支持自动化环境,” 德州仪器半导体事业部中国区业务拓展总监吴健鸿介绍。其中包括新型MSP430电容式触摸功能在内的解决方案,效率大幅提升的C2000实时控制产品系列,以及不断扩展的TI
[焦点新闻]
“寒冬”下逆势上扬 !AGV增速领跑工业自动化新趋势
新冠疫情下,机器人已然成为战“疫”的重要成员:医疗机器人化身为医生助手、护士,服务机器人化身为服务员,配送机器人化身为快递员,AGV化身为搬运工……在医院、商场、仓库等场所中发挥着重要作用。 作为工业机器人的重要细分领域之一,近年来AGV快速成长,已成熟地渗入电商快递仓储分拣、汽车、烟草、医药、食品、化工、印刷、3C、邮局、图书馆、港口码头和机场、危险场所、特种行业以及各类型的制造业当中,覆盖仓储物流与机器人两大热门领域。随着中国人口红利的消失、国内产业转型及电商物流行业的极速发展,AGV以其灵活、高效、安全等优势游走于现代仓库的智能升级中。 无畏行业寒冬,逆势而上持续发展 中国连续5年成为全球第一
[机器人]