听觉与其他感官

研究表明，嗅觉和听觉是能相互影响的，二者能对学习能力、表现能力和创造能力产生一定的影响。事实上，有些学校开始给学生播放噪音、在教室里增加一点点芬芳的味道，看这样做能否影响学生的成绩。

感官认知包括对多重感官的复杂刺激进行整合。马希米亚诺·赞皮尼（Zampini）和查尔斯·斯宾塞（Spence） 2004年和2005年颇具挑战性的研究结果证明了声音感官属性的认知是如何影响产品其他感官层面（味觉）的认知的。研究人员发现，在进餐和倾倒食品时听到的声音可以影响消费者对产品新鲜程度或味道的认知。因此，在咀嚼薯片时听到的响亮而清脆的声音可以提高人们对产品脆度和新鲜度的认知。与此类似，消费者认为，将饮料倒入容器中时，如果听到响亮的冒泡声，那么该饮料的碳酸程度更高。我们再扩展一下思路设想一下，如果向棉花糖倒入牛奶后，你没有听到咔嚓的声音，那么你会对棉花糖作何感想呢？实际上，当哈雷摩托车经过时，我们听到响亮的轰隆声对品牌识别具有重要作用，以至于该公司试图将摩托车发动机和排气系统的低吼声注册为商标，以便阻止竞争对手抄袭车辆的声音署名。 毫无疑问，对于许多产品而言，声音已经成为消费者体验中至关重要的组成部分。

视觉元素和听觉元素在广告中有着怎样的关系呢？美国2002年的一项研究发现，观众对听觉的记忆效果比视觉更好。当观众需要将注意力分散到电视节目的视觉影像和声音刺激时，他们会优先处理听觉刺激，因为对话对理解电视节目的情节而言至关重要。同时，如果视觉刺激更加值得关注（例如，旅游纪录片），那么视觉可能比听觉更具冲击力。当前大部分对比视觉刺激和听觉刺激的研究均已将影音图像与文本进行了比较。

犹他大学的生物工程学家发现，我们理解语言时对视觉的依赖程度超过了之前的想象。在合适的条件下，眼睛看到的会覆盖耳朵听到的。这些发现表明，人工听觉设备和语音识别软件不依赖麦克风，也能从摄像头获益良多。他们证明了视觉能够影响大脑的听觉部分，从而改变人们对现实的感知。

听觉可以转化为视觉吗?根据国外媒体报道，一名先天性盲人正在学习一项令人惊讶的新爱好：摄影。他的热情要归功于一个设备，它可以将图像转化为声音序列。这一技术不仅使盲人重“见”光明，而且使人们对神经学家认为的大脑运作方式产生怀疑。(www.daowen.com)

1992年，荷兰工程师皮特·梅耶尔创造了vOICe,一个可将简单图片转化为音乐音响的算法系统。这一系统将影像从左至右扫描，并在扫描的同时，将影像中图形转换为声音，位置高的图形会产生较高的声音序列。例如，一个从左至右延伸的对角线会转化为一组上升的音乐符号。而更为复杂的影像，如坐在草坪上的椅子上的人，开始时听起来像一团杂音，但经过足够训练的使用者将学会“听见”日常生活场景。2007年，神经学家阿米尔·阿玛迪及其耶路撒冷希伯来大学的同事们开始训练先天失明的实验对象使用vOICe。尽管没有视觉参考点，但经过仅仅70个小时的训练后，实验对象从最初只能“听见”简单的点和线，到最后能“看见”整个影像，如由4500像素组成的人脸及街角。通过一个连接电脑及耳机的头戴式摄像头，盲人使用者甚至可以仅仅通过声音提示在屋子里自由活动。每隔几步，这一设备就会拍一个照片并将之转换为声音，这样，当使用者经过桌子和垃圾桶时，告诉使用者他们的位置。一个患者甚至通过头戴式系统构思快照，学会了摄影。

哈佛大学的神经学家艾拉·斯拉里姆-阿米特（Ella Striem Amit），同时也是这篇论文的共同作者，认为是时候创建新的模型了。“大脑并不是感官型机器（sensory machine）,而是一个任务型机器（task machine），”她说，“无论你给大脑输入什么，大脑中都有区域处理辨别人体身形——视觉皮层不仅仅只处理视觉信息。”阿玛迪的团队近来发布了vOICe的升级版本，名为“Eye Music（视觉音乐）”，它是一个免费的苹果应用程序。这一新的算法系统可以产生更为悦耳的音符，甚至能产生颜色信息。

vOICe将图像转换成声音，帮助失明者用听觉“看见”世界（即使先天失明的人，在识别身形、面孔等景象时，也会用到视觉皮层的纹外体区）。

在《公共科学图书馆·生物》（PLoS Biology）的一项研究发现，触觉的敏感度是可遗传的，它与听觉也有着明显的关联。听觉突出的人更有可能有敏感的触觉，因为听觉和触觉都依赖于可以感应机械刺激的感觉细胞。随后研究人员对先天失聪的学生进行了触觉敏感度测试，他们发现五分之一的学生的触觉也受到了损害，这表明一些引起失聪的基因可能也会钝化触觉的敏感度。