青岛大学:研发非冯诺依曼柔性神经形态视觉传感器

现有的机器视觉在自动驾驶、人脸识别、无人机导航、工业检测、视频监控等方面已经达到了一定水平,但是面对复杂环境,比如高速运动、极端昏暗条件下,其综合性能还有待提高。目前,机器视觉系统面临的挑战有以下三点:

1.如何采集良好的视觉数据。

2.硅基半导体技术在跟上摩尔定律方面已经达到了极限,在芯片升级方面存在瓶颈;

3.处理器与存储器间的信息传输存在缺陷

人类视觉系统是我们感知系统中最重要的组成部分,它负责感知和处理人体获得的80%以上的信息。面对如此庞大的信息,人类视觉系统表现出低冗余、低功耗、强鲁棒性等优越的性能。这是现有的机器视觉系统无法比拟的。因此,重新审视人类视觉系统,借鉴其感知与处理信息的机制,有助于发展更高性能的机器视觉。在人类视觉系统中,视网膜在功能与结构上的特点可以辅助解决以上问题:

1.视网膜曲面的结构保证较好的成像效果。若将机器视觉系统中感光模块制作为曲面,可进一步减少算力消耗;

2.人类神经网络有助于神经网络算法的进一步发展。更优秀的算法可建立性能更高的机器视觉系统;

3.视网膜作为感知模块的终点与信息处理的起点,仅由一个模块完成了两个模块的工作。若将机器视觉系统中感光模块与预处理模块进行集成,不仅能提升整体集成度,而且也能避免存储器壁(memory wall)的问题。


研究成果

近日,青岛大学金明亮团队、宿杰团队、新加坡国立大学葛树志团队发表综述文章,概述了一类受视网膜启发的具有“感存算一体化”功能的柔性神经形态视觉传感器的制作方式。

本文从人类视觉系统出发,比较和讨论了人类视觉系统和传统机器视觉系统之间的差异。由于视觉信息的多样性和数据量较大,使用非冯诺伊曼结构的柔性神经形态视觉传感器可以有效地弥补基于冯诺伊曼架构的传统机器视觉系统的局限性。首先,本文讨论了视网膜信息处理机制的模仿方式,并概述了非冯·诺伊曼计算架构的原理和电路实现方法。

其次,本文以二维材料为例,从光电材料与计算材料两种角度介绍了该类型传感器材料选择的一般标准,并对目前相关光电探测器性能进行了对比。

再次,在模拟视网膜表面结构方面,本文介绍了柔性传感器阵列的优势与制造方法。根据时间顺序对相关工作者的探索进行了总结。最后,本文分析了非冯·诺伊曼柔性神经形态视觉传感器目前面临的挑战,并对其未来的发展进行了展望。

来源:传感器专家网

相关新闻
深圳国际传感器与应用技术展览会盛大开展,森瑟科技闪耀登场
​2025 年 3 月 31 日至 4 月 2 日,第三届深圳国际传感器与应用技术展览会(Sensor Shenzhen)在深圳会展中心(福田)盛大开幕。作为中国感知领域覆盖面最广、产业链最全面的展会,本届 Sensor Shenzhen 再次成为行业焦点,吸引了来自全球的众多企业与专业人士。
2025年03月31日
森瑟科技即将亮相 2025 中国工业设备智能运维大会暨创新成果展
4 月 16 日至 18 日,由中国机械工业联合会与中国机电装备维修与改造技术协会主办的 “第四届中国工业设备智能运维大会暨创新成果展” 将在杭州盛大召开。届时,深圳市森瑟科技发展有限公司将携前沿产品与技术精彩亮相,展台号为 B42。
2025年03月21日
森瑟科技诚邀您莅临深圳国际传感器展会
2025 年 3 月 31 日至 4 月 2 日,备受瞩目的 “深圳国际传感器与应用技术展览会” 即将盛大启幕,这无疑是一场汇聚全球前沿传感科技与创新应用的行业盛会。
2025年02月21日
森瑟科技2025年春节假期安排
尊敬的合作伙伴及全体员工: 大家好! 感谢所有同仁及合作伙伴一直以来对森瑟科技的辛勤付出和全力支持。 根据国务院办公厅放假通知并结合公司实际情况,现将我公司2025年春节放假安排通知如下:
2024年12月24日
《森瑟科技与开拓精密共赴军民两用科技装备博览会》
2024 年 12 月 4 日,深圳国际会展中心 3 号馆 VIP+D708 展位,一场备受瞩目的军民两用科技装备博览会盛大开幕。森瑟科技,作为一家自主可控的国产化传感器公司,受合作伙伴开拓精密的盛情邀请,共同参与此次盛会。
2024年12月04日