(资料图片仅供参考)
边缘人工视觉系统因在自动驾驶、智能家居、视频监控等场景的大量应用,已成为备受关注的研究领域。传统的人工视觉系统采用“感—存—算”分离的架构,致使大量冗余传感数据在不同模块间的频繁迁移,导致系统高延迟、高功耗。采用神经形态计算技术,开发集成传感、存储和处理与一体的感内或近感计算人工视觉系统是解决这一问题的重要途径之一。储池计算是计算复杂度低、能耗小的神经形态计算技术,适合与传感器结合应用于资源受限的边缘端。然而,由于储池权重固定,在降低训练成本的同时,其网络适应能力受到限制,难以应用于复杂多变的实际环境。
中国科学院微电子研究所微电子器件与集成技术重点实验室刘明院士团队研究员尚大山联合北京师范大学博士何聪丽、香港大学博士王中锐、中国科学院物理研究所研究员张广宇团队,利用二维单层MoS2场效应管(FET)光电非线性响应机制和动力学特性,结合生物视觉系统中水平细胞反馈机制,开发了具有明/暗光自适应功能的感算一体延时储池计算技术。
生物视网膜中存在亮度响应阈值不同的两类光感知器细胞即视锥细胞和视杆细胞,分别适用于明亮和昏暗环境下的视觉行为。这两类光感知细胞通过水平细胞的反馈机制进行动态调制,使视觉系统的光敏程度可随着环境光强的增加(减小)而增强(减弱),从而实现明暗视觉适应功能。受生物视网膜启发,该团队采用单层MoS2为沟道材料、HfO2薄膜为栅电介质、Si/SiO2为衬底的背栅结构光电FET器件,通过数学建模定量描述了器件受光强调制的转移特性和受栅压调制的光电流衰退过程,并基于器件测试数据构建了光电延时储池计算模型,实现了对动态视觉信息的识别。该工作在光电延时储池网络基础上,从仿生角度出发,借鉴视网膜水平细胞调制机制,研发了轻量化水平调制神经网络模块,并利用栅压调控机制模拟光感知细胞光敏特性的切换过程,实现了储池计算的自适应调制过程,在混合光强MNIST数据集上的识别率得到显著提升。与固定结构的延时储池计算相比,自适应延时储池计算利用了器件的光电动力学可调特性,提高了系统的泛化能力和不同环境下的稳定性,并保留了储池计算硬件友好、网络轻量化、训练成本低等特点。该成果为开发可用于边缘智能的高能效、自适应的仿生视觉系统提供了参考。
近期,相关研究成果发表在《先进光学材料》(Advanced Optical Materials,DOI:10.1038/s42256-023-00609-5)上。研究工作得到科学技术部、国家自然科学基金委员会、中国科学院和香港大学的支持。
图1.a、二维单层MoS2光电FET阵列;b、器件在不同输入光功率下的转移曲线;c、不同栅压下光电流Iph与光照强度的依赖关系;d、不同栅压下的归一化光电流衰退曲线;e、器件非线性光响应动态累积过程;f、不同栅压下器件的动态响应范围(DPR)。
图2.a、混合光强MNIST手写数字数据集示意图;b、具有水平调制(HM)网络模块的延进储池的视觉自适应工作流程;c、栅压调制下器件动力学响应过程;d、光电自适应延时储池计算过程示意图;e、基准网络(左)、小调制范围网络(中)和大调制范围网络(右)识别率;f、初始储池网络(黑)、小调制范围网络(蓝)和大调制网络(红)的识别率比较。
上一篇:筑牢安全防线!广西等地开展安全培训演练 提升应急救灾能力
下一篇:最后一页
目前应该是有很多小伙伴对于名白雅美的职业简介方面的信息比较感兴趣,
hello大家好,我是城乡经济网小晟来为大家解答以上问题,起司是什么,
“在公司楼下就能查询到公积金明细,真是没想到啊!”在近铁楼宇上班的
“妈、妈咪!你先把棒棒放下来呗,有话好好说…”“好好说?你干出这种
事实上郑合惠子并不是日本人,而她之所以有一定的知名度和人气,其实也
6月21日,云南元江县启动新能源-分散式风电资源开发竞争性磋商。根据公
驱车行走在山东恒信集团有限公司的生产厂区里,五千余亩的厂区内几乎见
人民网曼谷6月24日电(记者赵益普,实习生李源欣、景超平)为庆祝6月23
昂楼上说的很对就是有个人陪你一起吃好吃的陪你好多年一起吃好吃的结果
1、准备好笔和纸,先画出一条像2的曲线。2、2、然后在下面再画出一条线
X 关闭
上海推进三大先导产业规模实现倍增 打响“上海制造”品牌
深圳机场开通今年第5条国际货运航线 为深圳企业外贸出口提供新支撑
湖南公布90个建筑施工质量管理不合格工地名单
公众如何防范奥密克戎变异株?疾控专家回应
河南中招体育考试4月1日启动 计入中招成绩总分
婴幼儿疫苗最近暂停接种?郑州市疫情防控相关部门回应
X 关闭