维也纳工业大学研发内置神经网络的图像传感器可快速识别物体-电子工程世界

据外媒报道，维也纳工业大学（TU Wien）的研究人员研发了一款内置神经网络的超高速图像传感器，经过训练，该款传感器可用于识别物体。

黑科技，前瞻技术，维也纳工业大学图像传感器,内置神经网络图像传感器,快速识别物体传感器

（图片来源：维也纳工业大学）

如今，自动图像识别技术被广泛采用，有些计算机程序能够可靠地诊断出皮肤癌、为自动驾驶汽车导航或控制机器人。到目前为止，上述应用都需要依赖普通摄像头对图像数据进行评估，而该过程非常耗时，特别是当每秒记录的图像数量很大时，会产生大量难以处理的数据。

因此，维也纳工业大学的科学家们采取了一种不同的方法，利用了一种特殊的2D材料，研发了一种图像传感器，经过训练可用于识别特定物体。该芯片代表了一种具备学习能力的人工神经网络，无需由计算机读取和处理数据，该芯片本身就可以在纳秒内提供当前所看到的信息。

黑科技，前瞻技术，维也纳工业大学图像传感器,内置神经网络图像传感器,快速识别物体传感器

（图片来源：维也纳工业大学）

学习硬件

神经网络是一种与人脑类似的人工系统，人脑的神经细胞与其他神经细胞相连，当一个细胞处于活跃状态时，会影响到邻近神经细胞的活动。在计算机上进行人工学习的原理也与人脑完全相同，对神经元网络进行数字化模拟，改变该网络上的一个节点对另一个节点的影响强度，直到该网络显示出研究人员所需的行为。

研究人员表示：“通常，需要逐像素读取图像数据，然后再在计算机上处理图像数据。我们则将具备人工智能功能的神经网络直接集成到图像传感器的硬件中，从而使物体识别速度提升了好几个数量级。”

该芯片由维也纳工业大学研发和制造，基于一种由二硒化钨制成的光电探测器打造，二硒化钨是一种超薄的材料，只由三层原子层组成。该光电探测器（摄像头系统的“像素”）被连接到少量的输出元件上，而此类输出元件会提供物体识别的结果。

黑科技，前瞻技术，维也纳工业大学图像传感器,内置神经网络图像传感器,快速识别物体传感器

（图片来源：维也纳工业大学）

在不断变化的灵敏度条件下学习

研究人员表示：“在我们的芯片中，我们可以专门调整每个探测器元件的灵敏度，换句话说，我们可以控制影响输出信号的探测器接收信号的方式。我们所要做的就是直接在光电探测器上调整局部电场，此种调整是在计算机程序的帮助下，在外部完成。例如，可以采用传感器记录不同的字母并逐步改变单个像素的灵敏度，直到某个字母总是精确地指向相应的输出信号。芯片中的神经网络也是这样配置的，可以让网络中的某些连接更强，另一些连接更弱。”

一旦学习过程完成，就不再需要计算机了，该神经网络就可以独立工作了。如果将某个字母呈现给传感器，就可以在50纳秒内生成训练好的输出信号，例如，一个数字代码，表示芯片刚刚识别出的字母。

当物体需要高速运动时，也可识别物体

研究人员表示：“目前，我们研发的测试芯片很小，但是可以根据想要解决的任务将其轻松扩展。原则上，此种芯片也可通过训练，用于区分苹果和香蕉，但是我们希望其能够更多地应用于科学实验或其他特殊应用。”

此外，该技术还可用于极其高速的应用：“从断裂力学到粒子探测等多个研究领域，可以用于研究短时间内发生的事件。”

关键字：维也纳工业大学神经网络图像传感器引用地址：维也纳工业大学研发内置神经网络的图像传感器可快速识别物体

上一篇：Uhnder与dSPACE合作推进雷达传感器技术发展
下一篇：阿尔卑斯阿尔派与Acconeer公司合作开发下一代传感技术

推荐阅读最新更新时间：2024-10-17 04:51

说到图像传感器亚军三星与索尼的差距越来越小了

　　在全球图像传感器市场，三星与龙头老大索尼的差距不断缩小，由于智能手机、安全产品流行，图像传感器市场快速增长。下面就随物联网小编一起来了解一下相关内容吧。说到图像传感器亚军三星与索尼的差距越来越小了　　IC Insights在报告中指出，CMOS图像传感器年营收2018年将会增长到137亿美元，比2017年攀升10%。　　到了2022年，这一数字将会上升到190亿美元。CMOS传感器不断进步，比如可以处理多种多样的光强，成像速度加快，分辨率提升，为了完成特定任务，它还添加更多功能，我们将CMOS传感器装进安全视频摄像头，或者为机器人、汽车增加机器视觉能力，用来识别人，用于手势界面、VR/AR、医疗系统。

[物联网]

手机相机模块封装的关键技巧

硅晶半导体组件布局的最佳化俨然已成为最小化芯片面积的关键。这一策略提升了每一晶圆的芯片数，因而可达到最小化的单位成本。由于CMOS图像传感器必须搭配镜头模块(lens train)，才能完成一个固态相机模块，因此，CMOS图像传感器的开发也取决于不同的经济考量。为达到最小体积的相机模块，必须对硅晶布局进行折衷，以降低组装成本，并通过封装创新来增加产品可靠性。固态图像传感器固态图像传感器正广泛地应用在各类产品中。以数量来看，目前最大的应用市场在移动电话所用的相机模块，今年单单针对这项应用来看，每天就有超过两百万个的规模。大多数的固态图像传感器都是基于CMOS技术，因为CMOS技术能提供比电荷耦合组件(CCD)技术更高整合

[嵌入式]

安森美半导体扩展领先的图像传感器阵容用于光照度低于1勒

近日，推动高能效创新的安森美半导体正扩展Interline Transfer EMCCD (IT-EMCCD) 图像传感器阵容，新的选择不只针对微光工业应用如医疗和科学成像，还针对高端监控的商业和军事应用。下面就随半导体小编一起来了解一下相关内容吧。安森美半导体扩展领先的图像传感器阵容用于光照度低于1勒克斯的成像应用新的400万像素KAE-04471采用比现有的IT-EMCCD器件大的7.4微米像素，使该新器件的聚光能力倍增并提升微光条件下的图像质量。KAE-04471的引脚和封装与现有的800万像素KAE‑08151兼容，令摄像机制造商能易于充分利用现有的摄像机设计来支持新器件。新的KAE-02152与现有的K

[半导体设计/制造]

基于DSP和CMOS图像传感器的实时图像采集系统的实现方案

DSP是基于可编程超大规模集成电路和计算机技术发展起来的一门重要技术，DSP芯片的快速数据采集与处理功能以及片上集成的各种功能模块为DSP应用于各种场合提供了极大的方便。而CMOS图像传感器与CCD相比，由于CMOS图像传感器能将时序处理电路和图像信号的前端放大与数字化部分集成于一个芯片内，因而其发展一直受到业界的高度重视。现在，随着技术与工艺的发展，CMOS图像传感器不仅在噪声上得到了有效改善，而且分辨率也得到了明显提高。CMOS图像传感器将以其低廉的价格、实用的图像质量、高集成度和相对较少的功耗在视频采集领域得到广泛的应用。为此，本文提出了一种基于DSP和CMOS图像传感器，同时由复杂可编程逻辑控制芯片CPLD控制的实时图像采

[嵌入式]

基于神经网络的抽油机故障诊断

1 引言神经网络技术在学习速度、适应性、非线性映射等性能上有独特的优势,能够进行有效的监督分类,因此常用来进行聚类分析,然而在进行聚类分析时,出现为了提高识别精度而使网络规模较大,并且收敛时间慢的问题,1981年芬兰学者Kohonen提出了一个比较完整的、分类性能较好的自组织特征映射(Self-Organizing Feature Map)神经网络(简称SOM网络)的方案。SOM网络是一种由全连接的神经元阵列组成的无教师自组织网络,可以认为是2层网络,第一层是输入层,另一层是竞争层,本例的SOM网络结构如图1所示 : 本文针对传统自组织神经网络分类精度低和收敛速度慢的缺点进行改进。 2 自组织特征映射神经网络 SOM网

[嵌入式]

图像传感器供应商SmartSens回应知识产权纠纷

近日，全球领先的CMOS图像传感器供应商SmartSens针对近期公司遭遇的专利侵权诉讼做出回应： SmartSens此前被诉侵犯某公司的专利权，相关的两项专利分别为200510052302.4号发明专利（名称为“像素间采用共享晶体管的CMOS图像传感器”）和200680019122.9号发明专利（名称为“场效应晶体管布置对称的像素”）。公司为此聘请业内资深律师积极应对，经公司提起专利权无效宣告请求，国家知识产权局复审委员会于近日对上述两项专利分别作出第36227号和36245号无效宣告请求审查决定，宣告上述两项专利权全部无效。 SmartSens的代理律师表示，鉴于两项专利已被宣告全部无效，根据最高人民法院的相关司法解释

[传感器]

柯达宣布出售图像传感器业务

柯达一直在犯愁怎么才能赚钱，之前的破产传闻犹言在耳，面对毫无起色的业绩，柯达近日-宣布，出售其图像传感器（Image Sensor Solutions）业务来维持自己的运行。据外电报道，北京时间11月8日晚，柯达正式宣布，将旗下的图像传感器业务出售给美国的私募基金铂金资本（Platinum Equity）。柯达在声明中表示，作为协议的一部分，柯达将出售纽约州罗切斯特的工厂。目前它主要用来安置柯达的研发和制造部门。出售的价格并没有透露，外界猜测大概在100亿到200亿美元之间。收购的细节也不明了，或许下周一的官方新闻稿会有更详细的说明。　　　　 Platinum Equity合伙人Brian Wall表示：“这

[工业控制]

索尼计划在日本熊本县建立图像传感器新工厂

据日本经济新闻周四报道，索尼集团公司正在考虑在日本熊本县建立一家新工厂来生产智能手机图像传感器。报告称，该公司计划最快在 2024 年在该工厂破土动工，并最早在 2025 年投产，并补充说该公司预计成本将达到数十亿美元。 Strategy Analytics 此前发布的《智能手机图像传感器市场份额 2022 年 Q2: 需求继续减弱》指出，今年上半年全球智能手机图像传感器市场总营收为 64 亿美元，出货量同比下降 11%。据称，索尼半导体解决方案以 44% 的收入份额位居榜首，三星系统 LSI 和 OMNIVISION 紧随其后。索尼、三星和 OMNIVISION 占据了全球智能手机图像传感器市场近 83% 的收入

[传感器]

热门资源推荐
热门放大器推荐

小广播

维也纳工业大学研发内置神经网络的图像传感器 可快速识别物体

维也纳工业大学研发内置神经网络的图像传感器可快速识别物体