【清华团队研发无透镜光电神经网络架构,提升端到端人脸识别隐私保护能力,赋能新一代极简化机器视觉】

“无透镜传感器,可以输出无可视化的图像,具有高隐私、高安全等特性。结合与其配套的光电智能神经网络,将对大规模、甚至超大规模的智能感知应用,起到重要支撑作用,进而可用于智能安防、智能家居、自动驾驶及其他下一代终端上。审稿人表示这项工作将给光学神经网络带来长足的进步。”清华大学电子工程系陈宏伟教授表示。

近日,该课题组提出一种无透镜光电神经网络架构(LOEN,Lensless Opto-Electronic Neural network)。这是一项从研究伊始便面向工业及边缘视觉感知的课题,具备较强的应用性。LOEN 可用于机器视觉任务,利用成像光路中插入的无源光学掩模版,在光域执行卷积运算,借此解决了自然场景中非相干光源和宽带光信号处理带来的挑战。

以手写数字识别任务为例验证该架构中光学卷积的性能时,使用单核掩模版的手写数字识别准确率可以达到 93.47%。在掩模版上并行排列多核实现单层多通道卷积运算,识别精度可提升至 97.21%。相比传统机器视觉链路,可节省大约 50% 的能耗。

借助该成果,可实现自然光场景下的光电混合神经网络计算。面向特定任务时,可以联合优化光电全链路,同时实现体积和功耗的极简化,可使其便于部署在边缘设备中。另外,无源的光学掩模版,不仅可对入射光学场景进行卷积运算,而且还可进行天然的图像加密,从而形成人眼不可辨认的光场景信息混叠图像,借此可应用在隐私保护的各种视觉任务场景中。

相比传统加密解密方式,该方法省略了在传感器端与服务器端解密可视图像的步骤,实现了从光学采集到视觉任务完成全过程的隐私保护,可从根本上保障传感成像隐私性。使用时,用尺寸为不足一厘米的传感芯片模组直接拍摄人脸,设备端便可传回此人的身份信息。类似地,也可完成对人脸、动作、表情、姿势及二维码等多种特征的识别。

戳链接查看详情:

【清华团队研发无透镜光电神经网络架构,提升端到端人脸识别隐私保护能力,赋能新一代极简化机器视觉】

“无透镜传感器,可以输出无可视化的图像,具有高隐私、高安全等特性。结合与其配套的光电智能神经网络,将对大规模、甚至超大规模的智能感知应用,起到重要支撑作用,进而可用于智能安防、智能家居、自动驾驶及其他下一代终端上。审稿人表示这项工作将给光学神经网络带来长足的进步。”清华大学电子工程系陈宏伟教授表示。

近日,该课题组提出一种无透镜光电神经网络架构(LOEN,Lensless Opto-Electronic Neural network)。这是一项从研究伊始便面向工业及边缘视觉感知的课题,具备较强的应用性。LOEN 可用于机器视觉任务,利用成像光路中插入的无源光学掩模版,在光域执行卷积运算,借此解决了自然场景中非相干光源和宽带光信号处理带来的挑战。

以手写数字识别任务为例验证该架构中光学卷积的性能时,使用单核掩模版的手写数字识别准确率可以达到 93.47%。在掩模版上并行排列多核实现单层多通道卷积运算,识别精度可提升至 97.21%。相比传统机器视觉链路,可节省大约 50% 的能耗。

借助该成果,可实现自然光场景下的光电混合神经网络计算。面向特定任务时,可以联合优化光电全链路,同时实现体积和功耗的极简化,可使其便于部署在边缘设备中。另外,无源的光学掩模版,不仅可对入射光学场景进行卷积运算,而且还可进行天然的图像加密,从而形成人眼不可辨认的光场景信息混叠图像,借此可应用在隐私保护的各种视觉任务场景中。

相比传统加密解密方式,该方法省略了在传感器端与服务器端解密可视图像的步骤,实现了从光学采集到视觉任务完成全过程的隐私保护,可从根本上保障传感成像隐私性。使用时,用尺寸为不足一厘米的传感芯片模组直接拍摄人脸,设备端便可传回此人的身份信息。类似地,也可完成对人脸、动作、表情、姿势及二维码等多种特征的识别。

戳链接查看详情:https://t.cn/A6XnHlLX

#吴世勋[超话]##吴世勋DIOR全球品牌大使##吴世勋新剧我们曾经爱过的一切#
韩流TOP吴世勋❤GAON人气奖两连冠❤韩国嘉人单人封❤️SuperELLE创刊单人封❤LOEN Young创刊既开年单人封❤FASHIONSTA AWARD时尚奖❤连续两年明星权利榜冠军【南韩首位】&【世界首位】90后艺人Zenga杰尼亚全球形象代言人泰国国民品牌小老板海苔代言人 @wu世勋-EXO


发布     👍 0 举报 写留言 🖊   
✋热门推荐
  • -真的好喜欢这种一站式自主购物店,也不会店员一直跟着,有需要在直接问她们就行,体验感非常nice忍不住试了好多衣服都好喜欢!还有明星同款打歌服不管是辣妹还是甜妹
  • 四六级一建二建 初级会计中级会计注册会计师 审计师 税务师 经济师 N1 N2 法考 CMA 基金从业护士资格证 银行从业 教资笔试面试 一造 二造 监理
  • 2022年3月4日,周某驾驶号牌为川KG***X的小型普通客车行驶至松山南路处,因涉嫌实施饮酒后驾驶机动车的违法行为,被民警当场查获。2022年3月3日,闵某驾
  • 学会忘记烟雨与残阳,拂去表面的浮华,享受内心的知足与安宁;世界是一个绚丽的舞台,每一个人都是主角,都演绎着自己的故事。开的盛好的玫瑰花浓烈而又耀眼,当时我就认为
  • !!
  • 所谓传统的“深层清洁”主要去除的是一般洁肤品可能没“打扫”干净的角质碎屑、多余皮脂这些东西,也有毛囊口附着的污垢混合物等。关于日式皮肤管理的深层清洁这个说法,其
  • #我的安心变美推荐# #春日变美季# 医美是成熟的审美自由追求,随着社会的发展,对医美整形的正视已成为时代的必然。#鼻部手术# #我的安心变美推荐#打造脸型黄
  • 巴菲特早期运用的就是安全边际原则,也就是偏差理论,就是寻找市场错误定价的股票,四毛买一块,赚低估到合理的钱,也就是市盈率提升的钱,达到合理价格他就卖出,持有时间
  • #给你的flag与我想见的你最近突然很感慨要是小时候会个乐器啥的啊多好...大学里说不定还能和一群情投意合的朋友组个乐队啥的多开心,天天一起练歌写歌多棒...现
  • 4、主卧加大出一个大的衣帽间,改走了原在中宫的卫生间,满足女主人的大量储衣、包等的需求。从我们平时的生活中找到适合我们的品味,用简单的装饰线条和高级的材质去表达
  • 《美丽人生》后劲属实大 看完之后的日子常常回想起它开始我总觉得男主单箭头比较多 我就论断女主是有一些冲动在的 当时我在想啊以后找不到让自己满意的男人 也一定
  • #阿思旅行日记# 在武汉吃了些什么热干面:¥5,香热烫,感觉和我爸网上买回来自己煮的味道差不多粮道街覃肥叔桂林米粉:香辣素粗粉二两,¥6,第一次尝试按两卖的米粉
  • 先天一炁06-14 23:37阅读 7046天地清道夫先天为道,先天一炁即是本源之光,人拥有先天一炁,所以人拥有自性,人能无我,融入先天一炁,人即天人合一,与道
  • 在龙树的《十住毗婆沙论》中,我们可以看到与善导所说的相似处,现在就二者的忏悔文进行比较,列表如下:龙树《十住毗婆沙论》T.26/45b-c善导《往生礼赞偈》T.
  •   “无论当初密集地种,还是如今科学地砍伐,都是为了生态更好。  在这里,每平方公里土地理论上最多承载22人,却一度要养活142人!
  • 说:"我要回家去要些吃的,后妈打死我也得去,我饿得确实受不住了!她给丈夫说:"让你的四个女儿们放羊去,羊赶远一些去,整天不要回来了。
  • #人人都爱苏亚雷斯##美出了界##带着微博去旅行#【茶与紫砂壶】紫砂的特性适宜冲泡普洱熟茶,高温唤醒茶叶,浸出茶容物带给我们健康,紫砂材质本身的气孔使壶有透气性
  • 《入戏 出戏》 纸短情长 道不尽 一年 两期 四季 十一月 叹 将别离 尤不舍 虽莫离 只道是 盼 可奔赴 无羁绊 此去经年 一往
  • #直新闻和你睁眼看世界#【世卫组织宣布:将猴痘疫情列为“国际关注突发公共卫生事件” 2022.07.24】精选: · 习近平就埃及国庆70周年向埃及总统塞西致
  • 不过只配一个管线机肯定不行,首先得有全屋净水,在此基础上再装一个管线机,如果你家很大,建议除了厨房,卧室也可以装一台,冰水、室温水、43度泡奶水、55度、90度