在吵闹的环境中,我们和别人说话“只能靠吼”。如果有一个开关能让全世界都静音,只让对方开口说话就好了。Facebook旗下的“Facebook现实实验室”(简称FRL)将这个想法用一副眼镜实现。
我听到的声音只来自于你
这款AR眼镜上有多个麦克风,可以捕捉佩戴者周围的声音,同时记录他的头部和眼镜的运动模式,找出他最感兴趣的声音,并消除其他背景噪音。这样即使在嘈杂的环境中,也可让佩戴者清晰地听到他想要的声音。
这种“感知超能力”(perceptual superpowers),可能给听障人士带来新希望。根据2019年世卫组织的数据,全球大约有4.66亿人患有残疾性听力损失。AR眼镜将有可能提高听障人士的生活便利性,增强他们的社交生活。
另外,对普通人来讲,长时间暴露在85分贝以上的噪声水平下,可能导致听力下降。只听想要的声音而降低背景噪音,延长耳朵的服役年限,年纪大了还能耳聪目明。
“选择性倾听”的原理
这项发明采用的是“近场波束形成”的技术——麦克风按照一定的形状和规则布置的阵列,即麦克风阵列,是对空间传播信号进行采样的装置。根据声源和麦克风阵列距离的远近,声场模型分为近场模型和远场模型。
大多数的麦克风阵列语音增强方法,建立在声源位于阵列远场的假设基础上。这种语音增强模型在大房间会议室中有比较好的应用,但如果房间较小,声源和麦克风距离较近,这种语音增强模式性能就急剧下降。而近场波束形成技术即使在小房间混响条件下,也可以有效抑制噪音、提高语音信号质量。
当然,等技术成熟也需要时间。距离这款AR眼镜彻底成熟,变成面向市场的可穿戴电子设备,还有大约5-10年的时间,不过光是想象,就已经让人足够激动。#微博公开课#
图1:FRL AR增强技术眼镜发布会现场
图2:佩戴FRL团队AR眼镜与麦克风的交谈者
图3:FRL内部的声学实验室
作者:以殷
我听到的声音只来自于你
这款AR眼镜上有多个麦克风,可以捕捉佩戴者周围的声音,同时记录他的头部和眼镜的运动模式,找出他最感兴趣的声音,并消除其他背景噪音。这样即使在嘈杂的环境中,也可让佩戴者清晰地听到他想要的声音。
这种“感知超能力”(perceptual superpowers),可能给听障人士带来新希望。根据2019年世卫组织的数据,全球大约有4.66亿人患有残疾性听力损失。AR眼镜将有可能提高听障人士的生活便利性,增强他们的社交生活。
另外,对普通人来讲,长时间暴露在85分贝以上的噪声水平下,可能导致听力下降。只听想要的声音而降低背景噪音,延长耳朵的服役年限,年纪大了还能耳聪目明。
“选择性倾听”的原理
这项发明采用的是“近场波束形成”的技术——麦克风按照一定的形状和规则布置的阵列,即麦克风阵列,是对空间传播信号进行采样的装置。根据声源和麦克风阵列距离的远近,声场模型分为近场模型和远场模型。
大多数的麦克风阵列语音增强方法,建立在声源位于阵列远场的假设基础上。这种语音增强模型在大房间会议室中有比较好的应用,但如果房间较小,声源和麦克风距离较近,这种语音增强模式性能就急剧下降。而近场波束形成技术即使在小房间混响条件下,也可以有效抑制噪音、提高语音信号质量。
当然,等技术成熟也需要时间。距离这款AR眼镜彻底成熟,变成面向市场的可穿戴电子设备,还有大约5-10年的时间,不过光是想象,就已经让人足够激动。#微博公开课#
图1:FRL AR增强技术眼镜发布会现场
图2:佩戴FRL团队AR眼镜与麦克风的交谈者
图3:FRL内部的声学实验室
作者:以殷
北京电影学院利用虚幻引擎助力世园会开幕式 虚拟预演项目支撑教学成效显著
2019年北京世界园艺博览会开幕式虚拟预演项目是北京电影学院未来影像高精尖创新中心承接的北京大型文创活动运行设计项目。项目由开幕式虚拟预演系统研发与应用、虚拟预演汇报片创作等几个部分组成,动画学院李晓彬教授、数字影视动画创作教育部工程研究中心研究员刘洪琛老师作为技术专家,带领虚拟视觉团队加入到了世园会这场艺术与科技交融的创作盛宴中,跨院校、跨专业的顶尖研创力量在这里汇聚,其中诞生的成果又进一步应用到了游戏设计方向的教学活动中,使得项目、科研和教学间形成了产学研相互促进的良性循环。
为什么选择虚幻引擎
经过各种测试,他们认为虚幻引擎是可以满足项目需求和指导教学的最好工具。它可以与多种相关软件数据共享;功能强大,尤其是摄像机的参数和拍摄效果,可以让摄影师尽情发挥;地形系统强大,适合大场景复杂环境;界面、功能对艺术院校师生非常友好,可以大幅创作提高效率。
教学支持研创项目,研创项目反哺教学
世园会项目至少从三个方面对教学起到了直接的反哺作用。首先,带队教师针对项目研究适用技术,在提高项目质量的同时,这些技术成果及研究经验也会沉淀下来,应用到本科和研究生的课程中去。比如,基于虚幻引擎的大二基础课虚拟交互设计、大三实践课游戏联合创作、大四的毕业设计、研究生毕业设计等。
了解详情:https://t.cn/A64ka0Ak
2019年北京世界园艺博览会开幕式虚拟预演项目是北京电影学院未来影像高精尖创新中心承接的北京大型文创活动运行设计项目。项目由开幕式虚拟预演系统研发与应用、虚拟预演汇报片创作等几个部分组成,动画学院李晓彬教授、数字影视动画创作教育部工程研究中心研究员刘洪琛老师作为技术专家,带领虚拟视觉团队加入到了世园会这场艺术与科技交融的创作盛宴中,跨院校、跨专业的顶尖研创力量在这里汇聚,其中诞生的成果又进一步应用到了游戏设计方向的教学活动中,使得项目、科研和教学间形成了产学研相互促进的良性循环。
为什么选择虚幻引擎
经过各种测试,他们认为虚幻引擎是可以满足项目需求和指导教学的最好工具。它可以与多种相关软件数据共享;功能强大,尤其是摄像机的参数和拍摄效果,可以让摄影师尽情发挥;地形系统强大,适合大场景复杂环境;界面、功能对艺术院校师生非常友好,可以大幅创作提高效率。
教学支持研创项目,研创项目反哺教学
世园会项目至少从三个方面对教学起到了直接的反哺作用。首先,带队教师针对项目研究适用技术,在提高项目质量的同时,这些技术成果及研究经验也会沉淀下来,应用到本科和研究生的课程中去。比如,基于虚幻引擎的大二基础课虚拟交互设计、大三实践课游戏联合创作、大四的毕业设计、研究生毕业设计等。
了解详情:https://t.cn/A64ka0Ak
#影院复工后全国单日票房首破4亿# 据灯塔数据,2020七夕当天票房粗报5.2亿元,成为影院复工以来的最高单日票房。《我在时间尽头等你》单日票房达2.77亿,创下复工后的单片单日最高纪录,也击败《哪吒之魔童降世》在2019年七夕当天的2.52亿票房。《八佰》《荞麦疯长》《小妇人》随后。你支持了哪一部?#七夕档票房创复工以来新高#
✋热门推荐