马拉加大学电子系的专家和"仪器和系统电子学"研发小组的成员开发的一个突破性原型,将使听力损失的人能够通过触觉聆听音乐。它由一个音频触觉算法组成,利用"触觉幻觉"将单音音乐转化为基于振动的有形刺激。根据研究人员的说法,"这就像"入侵"神经系统,使其接受与发送的真实刺激不同的反应"。
(相关资料图)
"从长远来看,我们想实现的是让那些听不到的人能够"听"到音乐",本文的主要作者保罗-雷马奇研究员说,他坚持认为音乐具有影响情绪的力量,以及它可以作为一种治疗精神障碍和治疗疼痛的可能性。
研究人员预测,这将导致一个可能被带到音乐会上的便携式终端,因为这个原型将很容易转移到智能手机等技术设备上。
绘制音乐地图
这位年轻的研究人员与马拉加大学的安德烈斯-特鲁希略和费尔南多-维达尔教授合作,开发了一种算法,可以将从MIDI文件--乐器数字接口中提取的音乐特征和结构转化为"振动触觉刺激"。
实验证明,通过振动感知的"触觉幻觉"在没有听到的人中引起了与原始音乐不同的情绪反应--大部分是积极的。资料来源:马拉加大学
"这是类似于映射音乐的概念",雷马奇解释说,这种类型的文件不仅可以播放和产生声音,而且还可以提供"象征性的表示"。
控制振动
目前的模型并不能保证对音乐的情感反应和振动触觉版本之间的对应关系。有鉴于此,UMA的这些工程师提出了"触觉幻觉"的安排,以改善和扩展音乐特征的频谱,以运动、方向和位置变化的形式为振动添加动态。他们解释说:"这是一个具有挑战性的过程,因为皮肤的可感知频率范围低于听觉系统的频率范围,这可能会导致一些音乐特征的丧失"。
由于马拉加大学电子系的研究人员设计了一个开创性的原型,有听力损失的人将能够通过触摸的感觉来听音乐。资料来源:马拉加大学
不同的情感反应
有50多名志愿者参与的首次实验结果表明,"触觉幻觉"的安排引起的积极情绪多于消极情绪。它们也被认为比音频更令人愉快和刺激,激起了与原始音乐不同的情绪反应。
智能仪器和在医疗保健中的应用
第一个原型在科学杂志LNCS上发表后,在第11届触觉和音频交互设计国际研讨会(英国)上进行了展示--这是专门研究这些领域的最大的国际活动。目前,UMA的研究人员正在研究第二个模型并继续进行实验。
这项研究是保罗-雷马什博士论文的产物,是项目"智能仪器和医疗应用"的一部分。