盛传:一个多功能视觉-听觉感官替代装置

摘要

我们描述了一种将视频流实时转换为音频流的感觉替代方案。它最初是作为研究人类学习感知世界新方式的能力的研究工具开发的:Vibe可以给我们通过听觉学习一种“视觉”的能力。它将视频流转换为连续的立体声音频信号，以传输从视频流编码的信息。从视频流到音频流的转换使用了一种带有接受域的视网膜。每个接收域控制一个声源，用户听到的声音是所有这些声源的混合。与其他现有的视觉-听觉感官替代设备相比，Vibe具有高度的通用性，特别是因为它使用了一组可配置单元并行工作。为了证明视觉到听觉转换方法的有效性和趣味性，我们给出了一个指向任务的实验结果，包括通过视觉知觉记忆的目标或通过Vibe听觉转换的目标。本文还提供了一个机会来精确地绘制该方案的一般规范，以便为其在自主/移动硬件上的实现做准备。

应用仿生学和生物力学

摘要

版权

更多相关文章