【技术内容】
本技术将高分辨率的摄像机读取的视觉情报中的特征量转换成声音信号,通过耳机传递这些声音信号,“通过耳朵来看”——也就是说,不用通过眼睛只通过听觉就能够分辨出周围的空间构造与物体配置。是一种能够创造出新型知觉体验的次世代可穿戴式设备,结合即时音响合成所呈现的声音情报,通过机器学习对于现实世界情报进行感测与分析。
开发者们通过用户测试验证了本项系统的实用性,到目前为止,像积木这样的简单形状的识别,以及对于拥有墙壁和立柱的空间的大体把握等,短时间内的基本空间学习已经实现。今后,人物和日常物体的识别将变为可能,更加期待着这项技术在日常生活中的广泛应用。
本项技术基于神经科学与机器学习的成果,扩张了人类的空间知觉。不仅是在生活方面给予人类支援,在娱乐以及提高能力等广泛领域存在革新性。

视频请点击这里


【展示内容】
Sight把影像的特征通过声音呈现出来,是一种“通过耳朵来看”的设备。本次展示的Sight-version2.0,通过可见光相机与深度相机来取得影像情报,分别用“是什么”“在哪里”“有没有”进行判断,从这些情报中产生“物体的声音”。 Sight正在进行更具实用性的系统改良。