“鸡尾酒会”环境中的知觉线索的去掩蔽作用

摘要:在有多人同时说话的嘈杂环境中,为什么具有正常听力的人能在一定的程度上听懂目标语句?研究这个著名的“鸡尾酒会”问题的一个新进展是将干扰言语的作用区分出了能量掩蔽和信息掩蔽两种成分。与发生在外周系统的能量掩蔽不同,信息掩蔽发生在心理层次并受到认知过程的调节。因此,主观空间分离、与目标语句节奏相关的视觉信号以及对目标语句某些特征的熟悉程度等知觉线索都具有去掩蔽作用。考察可减少信息掩蔽的知觉线索的交互作用及其高级认知调节是今后重要的研究内容。 关键词:“鸡尾酒会”问题;知觉线索;选择性注意;能量掩蔽;信息掩蔽 分类号:b842.2;b849 1.“鸡尾酒会”问题 在嘈杂的室内环境中,比如在鸡尾酒会中,同时存在着许多不同的声源:多个人同时说话的声音、餐具的碰撞声、音乐声以及这些声音经墙壁和室内的物体反射所产生的反射声等。在声波的传递过程中,不同声源所发出的声波之间(不同人说话的声音以及其他物体振动发出的声音)以及直达声和反射声之间会在传播介质(通常是空气)中相叠加而形成复杂的混合声波。因此,在到达听者外耳道的混合声波中已经不存在独立的与各个声源相对应的声波了。然而,在这种声学环境下,听者却能够在相当的程度上听懂所注意的目标语句。听者是如何从所接收到的混合声波中分离出不同说话人的言语信号进而听懂目标语句的呢?这就是cherry在1953年所提出的著名的“鸡尾酒会”问题(cherry.1953)。 自cherry提出“鸡尾酒会”问题半个多世纪以来,大量的科学家试图去解决这个问题,甚至试图制造一个计算机言语识别的智能系统使其具有在嘈杂环境中识别目标语句的功能。但到目前为止,“鸡尾酒会”问题还没有得到满意的解答。为了能够更好地理解“鸡尾酒会”问题,我们首先来看看干扰性言语对目标言语能产生哪些掩蔽作用,这对深入认识这个问题的本质有重要的意义。 2.能量掩蔽和信息掩蔽 因此我们认为,认识“鸡尾酒会”问题之本质就是要认识信息掩蔽的本质,而听者利用不同的知觉线索来减少和消除信息掩蔽作用的认知操作又是一个最为核心的问题。下面我们将对几种重要的相关的知觉线索作一个总结。 3.主观空间分离与信息掩蔽 cherry(1953)在他所提出“鸡尾酒会”问题的文章中,同时也提出了几种可能被用来减少和消除言语掩蔽的线索,其中一个重要的线索是干扰声音与目标声音之间的空间分离。 根据zurek(1993)所提出的理论,目标声源和干扰声源之间的空间分离主要通过两种效应来减少干扰声音对目标声音的掩蔽。一是头影效应或优势耳效应。由于人的头颅对声音中高频成分的传播具有遮挡作用,目标声源和干扰声源之间的空间分离可以提高某只耳朵上的信噪比,从而提高对目标信号的识别。这是一种声学物理的效应。二是目标声源与掩蔽声源之间的空间分离可以造成双耳线索上的差异,尤其是目标信号与掩蔽信号中的低频成分的双耳时间差的不同产生了双耳神经生理加工的线索,进而降低了对目标信号的觉察阈限。那么,目标声源和干扰声源之间的空间分离除了产生物理线索和神经生理线索外,是否还能产生在心理层次上的线索以减少掩蔽作用? 已有充分的研究结果表明,在有回声的环境中,空间分离所带来的头影作用和双耳神经加工的作用都会受到削弱(freyman et al.,1999;kidd,arbogast,mason&gallun,2005; zurelc,freyman&balakrishnan。2004)。然而,当掩蔽刺激是言语时,目标言语与掩蔽言语之间的空间分离仍然能提高听者对目标言语的识别(kidd et al.,2005)。这表明目标言语与掩蔽言语之间的空间分离不仅提供了头影效应和双耳加工这两类线索,还提供了其他线索,而且这种额外的线索所引起的去掩蔽作用是zurek的理论所不能解释的。在认识这种线索之前,需要介绍一下听觉优先效应的概念。 当两个相关(correlated)的声源发自不同的空间位置,并且它们之间有充分短的延迟(1~10ms)时,落后声音中的知觉特征(attributes)会在知觉层次上被领先声音所“捕获”(li, qi,he,alain&schneider,2005),使得听者只知觉到一个融合的声像,并且该声像的知觉位置在领先声音处或在其附近。这种现象被称为听觉优先效应(the“precedence”effect)(近期综述见li&yue,2002)。在有回声的环境下,优先效应可以使人们似乎感觉不到来自不同方向的反射声,进而在知觉层次上减少回声的干扰作用,以帮助听者准确地判断出声源的空间位置。 在模拟回声环境的实验室条件下,利用优先效应可以使不同的声音信号在知觉上产生空间分离。例如,当左右两个扬声器都发出a、b两个不同声音时,对a声音来讲。左扬声器提前3ms,而对b声音来讲,右扬声器提前3ms,由于听觉优先效应的作用,两个扬声器发出的 a声音就会有主观融合,其声像来自左扬声器或其附近;同样,两个扬声器发出的b声音也会有主观融合,其声像来自右扬声器或其附近。这样,a、b两个声像就会被知觉为来自不同的空间位置,从而出现知觉上的空间分离。但实际上,a、b两个声源在每个扬声器都有呈现,因而没有客观上的分离。freyman等人(1999)首先在他们的实验中运用听觉优先效应实验范式来研究在噪声掩蔽或言语掩蔽的条件下目标语句和掩蔽刺激之间的主观空间分离所带来掩蔽作用的变化。他们的研究表明,在噪声掩蔽条件下,主观空间分离只给目标语句带来很小的掩蔽释放;而在言语掩蔽条件下,主观空间分离可以给目标语句带来4~9db的掩蔽释放。这说明主观空间分离可以有效地减少信息掩蔽,但是对能量掩蔽的作用非常有限。 如果目标语句与掩蔽声音之间没有实际的空间分离,去掩蔽的头影效应和双耳时间差效应就不存在,但人的中枢系统却能够利用优先效应所造成的目标与掩蔽信号之间的主观空间分离来显著地减少信息掩蔽量。这反映了人脑的一个重要的高级知觉功能。 不同言语信号之间的主观空间分离在实际运用中也有非常重要的意义。例如,现代空军作战技术的发展对飞行员所用的通讯技术和其本人的心理通讯能力提出了更高的要求。空军飞行员在执行任务时往往会同时接受多个来源的语句信号,如来自地面指挥部、机群指挥员以及机群中其他担任不同任务的飞行员的言语信号。在某一时刻,某些来源的语句信号的重要性要大于其他来源的语句信号,这就对发展更加先进的听觉通讯系统提出了迫切的要求。利用主观空间分离去信息掩蔽的原理以及头传递函数的原理,可以将飞行员从耳机所接收到的不同来源的听觉信号分布在不同的主观空间上,并根据该时刻下的优先性来对某一个来源的信号经进行方位的确定(如头的正上方代表地面指挥部的信号位置),飞行员就会从众多的信号源中更有效地选择和 分析 定性数据统计分析pdf销售业绩分析模板建筑结构震害分析销售进度分析表京东商城竞争战略分析 不同来源的语句信号。 此外,近年来听觉的老年问题受到了越来越多的关注。为什么在嘈杂和有混响的环境中,老年人较年轻人在识别目标语句方面面临更大的困难呢?最新的研究表明,目标语句的直达波和反射波之间的知觉整合可以显著地减除信息掩蔽,而老年人与年轻人相比,这种知觉整合的能力要显著的低,特别是在较长的反射波延迟条件下(huang et al.,2008)。这为探索高级听觉认知加工的老年化开辟一条新的路子。 4.视觉线索与信息掩蔽 5.对目标语句的空间位置、内容以及嗓音的熟悉程度的作用 在kidd等人(2005)的研究中,若在实验前给被试提供目标声音的位置信息,被试在掩蔽的条件下对目标语句识别的成绩有显著的提高。brtmgart等人(2001)的实验也表明,如果在刺激呈现之前让被试对目标言语的特征有所了解,信息掩蔽能够在一定程度上得到降低。这些有关目标声音的位置以及声音特征等方面的先验知识能够引导被试将注意转移并集中于目标言语上,因而有助于追随目标语句流并提高对目标语句的识别。 对目标语句内容的熟悉和了解可以在言语掩蔽的条件下有效地提高听者对目标语句的识别 (freyman et al.,2004;yang el al.,2007,2008)。具体来讲,freyman 等人(2004)用三种不同的方式在目标语句出现之前呈现目标语句中的一部分内容作为启动刺激,即启动句的内容与随后呈现的目标句的内容完全一致,但是启动句的最后一个关键词用相同长度的白噪声所代替。这三种启动句呈现的方式分别为:(1)由朗读目标语句的嗓音读出, (2)由不同性别的嗓音读出,以及(3)用书面的方式呈现。通过对目标言语最后一个关键词(该关键词在启动句中不出现)的计分表明,无论何种呈现方式,有启动的条件下被试的成绩均显著好于无启动条件的成绩,并且这三个条件下的去信息掩蔽的程度基本一致。这些结果表明,对于目标语句内容的了解,一方面可以使注意能更容易地捕捉和追随目标语句,另一方面由于目标语句的大部分内容已经在启动时得到加工,在目标语句和掩蔽语句同时呈现时,中枢系统对已经加工过的部分无需重新加工或者只需要很少的资源进行再加工,进而节省了注意资源以集中加工随后的关键词并提高对这个关键词的识别成绩。实验中目标语句内容的启动作用不受声音特性及呈现方式的影响,说明这种去信息掩蔽的功能是通过高级语言加工的过程来实现的。 近期的研究除了证实了freyman的发现可以推广到汉语外,还首次发现对汉语目标说话人嗓音的熟悉也能显著地减少对目标语句的信息掩蔽而不显著地影响能量掩蔽(xu et al., 2008;yang et al.,2007。2008)。这表明,在知觉加工的层次上,对朗读汉语目标语句的嗓音的熟悉可以帮助听者将注意力有选择地放在这个嗓音特征上,进而能捕捉和跟随目标语句的“嗓音流”,强化了目标语句流和掩蔽语句流之间的知觉性分离。 综上所述,对目标言语的主观空间位置、语句的节奏特征、目标言语的内容以及目标说话人嗓音的先验知识都可以帮助听者把注意集中到目标语句上进而减少信息掩蔽以提高对目标信号的识别。 6.各种知觉线索之间的交互作用 在嘈杂的“鸡尾酒会”环境中,当目标本身的一些特性能保持一定的稳定性时,听者可以利用这些与目标语句相关的各种知觉线索来觉察、捕捉和追随目标语句流,以达到减少信息掩蔽的目的。这也表明,在“鸡尾酒会”这个重要的问题中,人类高级认知加工过程起了关键的作用。对各种知觉线索的利用是一个复杂的动态过程。在不同情况下。各个线索的显现程度会随时间发生波动,因而听者会在不同的条件下选择利用不同的线索组合来减少信息掩蔽。这样,各个线索之间一定会存在着复杂的交互作用。 noble和perrett(2002)的研究发现,当其他线索可以被用来帮助被试将目标与掩蔽信号进行分离时,空间的分离线索作用就会相应地减弱。freyman等人(2004)的实验也发现,当目标语句与掩蔽语句之间有主观空间分离的时候,有关目标语句内容的知识就不能进一步用于减少信息掩蔽。只有当主观空间分离的线索不存在时,被试才可以有效地利用内容线索来 减少信息掩蔽。近期的研究也证实了目标语句的嗓音线索与其他线索之间的交互作用,即嗓音线索的去信息掩蔽作用受到声音的强度线索以及目标与掩蔽刺激之间的延迟线索的影响(xu etal.,2008)。例如,当目标语句与掩蔽语句之间存在1秒的延迟时(这个时间延迟是一个较强的分离目标信号与掩蔽信号的线索),嗓音线索可以显著地减少信息掩蔽。而进一步加强对目标嗓音的熟悉程度(重复呈现嗓音启动语句或者在实验前对目标嗓音进行学习)不能继续增大去信息掩蔽的量。而当目标语句与掩蔽语句同时呈现时(延迟线索被除去),只有熟悉程度被加强后的目标嗓音才可以被用来有效地减少信息掩蔽。这表明,各种知觉线索去信息掩蔽的作用是可以相互补偿而不能线性叠加的。 目前,我们对于“鸡尾酒会”问题的研究还基本处于了解各个单一线索在去信息掩蔽中的作用的阶段。而要最终破解“鸡尾酒会”问题,需要对各种线索之间的交互作用进行系统的研究,以形成对线索作用的动态特征的认识。 7.总结及展望 主观空间分离给个体提供目标言语位置的信息,这些主观空间位置的信息可以促进听者对目标信号的选择性注意。视觉线索作用于跨感觉道的高级加工层次,也可以将选择性注意集中于与视觉线索相匹配的目标语句的节奏特征上。对于目标语句的内容或朗读嗓音的熟悉有记忆加工的成份在内,而这种有记忆参与的利用知觉线索所进行的自上而下的认知调节过程反映了人脑在嘈杂背景中提取和加工目标信号的主动的执行功能。 我们认为,当前有关“鸡尾酒会”问题的研究已经进入了一个关键的历史时期:大量的研究业已证明低层的物理和生理线索可以有效地去信息掩蔽,这些作用是通过自下而上的加工实现的,可以运用工程方法进行模拟;而作为更重要的高层知觉线索,各个单一线索的去信息掩蔽作用得到了证实,但其作用机理依然是未解之谜。探究其加工机理,总结出人类的中枢系统自上而下运用这些线索的规律是破解“鸡尾酒会”问题的关键。今后对这个重大的问题的研究应当着重探索以下的几个问题: (1)仅仅集中于自下而上加工的过程无法实现对“鸡尾酒会”问题的深入理解。对人类系统化知觉机制的深入研究是解决这个问题的基础,对其中各个知觉线索的高级整合机能的研究,是对“鸡尾酒会”研究的最高层次。勾勒出各个线索之间相互关系的蓝图,总结出中枢系统在不同情境下灵活运用不同线索的规律,“鸡尾酒会”问题会迎刃而解。因此,尽管目前的研究状态还基本属于对各个可能的线索进行分析和实证,但应当积极开展“跨线索”的实验研究。 (3)“鸡尾酒会”问题应当有相应的语言和文化色彩。研究者的眼光不能只局限于心理学和神经认知科学。研究不同语言和文化的背景在信息掩蔽中的作用可以极大地促进相关学科的交流和融合。 (4)尽管目前还没有任何一个计算机言语识别系统具有人的利用知觉线索来消除信息掩蔽的能力,但随着信息科学、计算机科学与心理学和神经科学的交叉,新一代的语言识别系统会逐步发展出人的去信息掩蔽的能力。因此,研究“鸡尾酒会”问题会带来计算机科学和信息科学发展的一个飞跃。 (5)对“鸡尾酒会”环境的适应体现了人脑的最高级的功能。研究各种感觉系统的疾病以及精神疾病如何影响这个高级功能也是深入认识这些疾病的一个重要渠道。因此,今后应当强化有关“鸡尾酒会”的基础研究与神经系统疾病研究的结合。如可以利用精神病人为被试,以探测“鸡尾酒会”问题为手段,折射病人与常人的高级认知功能的差别所在。