理论教育 评估员的国家事实验证研究所评估团队

评估员的国家事实验证研究所评估团队

时间:2023-10-15 理论教育 版权反馈
【摘要】:国家事实验证研究所评估团队由三名经验丰富的运营商组成,分层声音分析器团队由两名高级教练组成。因此,这里仅给出评价的抽样。在评估灵敏度关系时,d′值将在0以下到4之间。

评估员的国家事实验证研究所评估团队

上述对计算机声音压力分析器和分层声音分析器评估过程由两个检查者小组进行。第一组是由研究组所选出的两个评估者组成的团队,他们首先参加了国家事实验证研究所的培训,并且得到了进行计算机声音压力分析器分析的资格,然后进入分层声音分析器学校学习,并获得了相似水平的认证。每个实例中的第二个小组均由制造商提供。国家事实验证研究所评估团队由三名经验丰富的运营商组成,分层声音分析器团队由两名高级教练组成。

研究者通过多种技术来评价所得到的数据,这些技术旨在探索这些系统对压力、事实或欺骗十分敏感的可能性。在所有方法中都会有四个比率被计算:正确肯定、错误肯定、错误否定和正确否定。正确肯定率(或信号检测理论中的“命中率”)是指欺骗或其他行为之一被认定为存在,而实际上也确实存在的次数或百分比。也就是说,正确肯定率测量的是一个设备准确将欺骗性话语归为欺骗性,真实性话语归为真实性,高压力话语归为高压力的频率。同样重要的是错误肯定率的计算(也称为信号检测理论中的错误警告率)。它们所对应的是目标行为被称为存在,而实际上却不存在的次数或百分比。错误肯定率必须与正确肯定率进行比较,以确定设备正确辨别欺骗或压力存在的能力。例如,对于正确肯定率的单独检查不能提供用于检测欺骗的系统精准度,因为高的正确肯定率可以由精确度引起,或仅仅由于操作者的偏好而将话语样本划分为欺骗性,而不管实际上这种行为是否出现(例如,如果你是一把锤子,一切看起来都像一个钉子)。对于准确的装置而言,它将显示出较高的正确肯定率,这将明显不同于(它所显示的)较低的错误肯定率。另一方面,偶然运作的设备将显示相对相等的正确肯定率和错误肯定率。

本节仅提供说明性数据。为了避免冗余,(本节)仅为不同的系统、团队提供平行图。首先,对于四个条件(欺骗,事实,高、低压力)的所有的不同评估以及所测试的特定系统,两组队[佛罗里达大学通信处理高级研究所(IASCP)和国家事实验证研究所(NITV),佛罗里达大学的通信处理高级研究所(IASCP)和分层声音分析器制造商]都以非常类似的方式运作。因此,这里仅给出评价的抽样。不过,它们足以支持所得出的结论。

这里需要记住的是,每个审查员的判断都应交给一个独立的调查员(即本章的作者),他有一名技术人员对他们的统计分析进行核对。也就是说,这些实验本质上是双盲的。完成所有的分析组是可能的。(Harnsberger et al.2009;Hollien&Harnsberger 2006;Hollien et al.2008)

两个系统的数据通过灵敏度(d prime)和对于差异的强度(ANOVA)来测试。所有这些数据都是显著的,也就是说,他们证明这两个设备仅在偶然情况下运行,而统计量本身可以为声明提供依据。此外,通过d′(在这种情况下通常使用的程序)评价灵敏度。在评估灵敏度关系时,d′值将在0以下到4(甚至更高)之间。其中0表示根本没有灵敏度,1表示最低显著性,4表示非常高的灵敏度。在这种情况下,d′测量被用于确定这两个设备是否实际上可以检测欺骗和事实的存在以及其级别高低。

第一,两个团队通过计算机声音压力分析器获得的值显示在图6-21的左侧面板上。如图所示,它们非常相似。值得注意的是他们的灵敏度非常低(所有其他比较同样如此)。简而言之,所有结果的总和似乎都仅显示计算机声音压力分析器的偶尔得分。(Hollien et al.2008)(www.daowen.com)

第二,分层声音分析器输出的评估者也是两个经过培训、得到认证的运营商的团队(见图6-21的右图)。同样,两支队伍的表现大致相同。注意,它们也只在低于显著性的水平上执行。他们也只能发现约一半的高压力谎言,平均来说,在识别低压力的真实陈述为谎言时,二者得分几乎一样高。因此,只能得出结论,分层声音分析器对于检测欺骗不够敏感。(Harnsberger et al.2009)

简而言之,必须得出结论,这两个系统中没有一个具有显示出前面所描述那种能够检测欺骗或者事实存在的能力,或在压力水平下的欺骗或事实的高度控制的评估能力,事实上,虽然所观察到的正确肯定率和错误肯定率在两个团队之间,以及两个设备之间有所不同,但是通过d′的测量,灵敏度在所有条件下均保持为0;在任何情况下它没有接近截止水平1。无论如何,它都证明了他们偶尔准确的检测欺骗真相和压力水平的能力。事实证明,我们和其他的实地研究数据完全支撑了部分学者所进行的研究。(Damphousse et al.2007;Hollien&Harnsberger 2006)简而言之,这些设备根本不能为法律工作者提供任何有用的信息。如果需要检测欺骗,必须采用其他方法。也许,答案在于语音学家和语言学家所开发的程序中。

图6-21 灵敏度测量。这些柱状图提供了计算机声音压力分析器(VSA)和分层声音分析器(LVA)的敏感性测量值。左版面提供了两个团队的测量灵敏程度(国家事实验证研究所和Nemesysco公司)(与事实有明显的差异)。右版面显示了分层声音分析器在国家事实验证研究所和分层声音分析器的努力下得到的平行数据。所能接受的最小敏感度为1,不同程度的可接受表现值在1以上高度名案在4区内。

免责声明:以上内容源自网络,版权归原作者所有,如有侵犯您的原创版权请告知,我们将尽快删除相关内容。

我要反馈