广告

我看到音乐

了解约翰·克罗尼-迪伦(John Cronly-Dillon)的突破性计算机系统如何利用声音实现盲人导航,将图像转化为音乐。

Google NewsGoogle News Preferred Source

新闻简报

注册我们的电子邮件新闻简报,获取最新的科学新闻

注册

这个数字化景观中的每一条线和方框都被转换成一个音调,从而用音乐传达画面。

广告

约翰·克罗尼-迪伦 敬上

约翰·克罗尼-迪伦,英国曼彻斯特科学技术研究所的神经科学家,计划利用一种将视觉图像转化为音乐音调的计算机系统,让盲人“重见光明”。水平线是快速重复的单个音符,垂直线是和弦,倾斜的线则由上升或下降的音阶表示。对于更复杂的场景,克罗尼-迪伦会添加人声来代表复杂场景的不同方面,从而创造出他将其比作巴洛克复调音乐的旋律。“我们正在开发一种基本语言,”他说,“一种‘感官的世界语’。” 在测试中,克罗尼-迪伦的四名盲人受试者能够辨认出房屋、汽车、树木和路灯的静态图像。他预见有一天,盲人将能够借助连接到微型计算机的可穿戴视频摄像头,将景象转化为具有视觉意义的声音,从而在景观中导航。

保持好奇

加入我们的列表

订阅我们的每周科学更新

查看我们的 隐私政策

订阅杂志

订阅可享封面价高达六折优惠 《发现》杂志。

订阅
广告

1篇免费文章