一、文献名称 ¶
Gussow, A. E., Kapnoula, E. C., & Molinaro, N. (2019). Any leftovers from a discarded prediction? Evidence from eye-movements during sentence comprehension. Language, Cognition and Neuroscience, 34(8), 1041–1058. https://doi.org10.1080/23273798.2019.1617887 论文原文
二、研究背景 ¶
语言处理的预测性观点认为,对未来语言输入中的单词或结构的预测是句子理解中的一个重要机制。在这种情况下,语言处理器不仅限于整合传入的感官信息(例如听觉、视觉),以自下而上的方式构建更高层次的意义;而是使用更高层次的表征来形成关于下一步最有可能出现什么的假设。例如,当听到“女巫骑着她飞到了村子里……”时,人们可能会认为“扫帚杆”这个词是一个完整的词。这些假设反过来会在较低的感官水平上预激活预测项目,这是一种自上而下的机制,为即将到来的输入做好准备。在本研究中,考察了理解者如何结合口语句子语境和性别标记的形容词,分别实时创建和调整词汇预测。具体询问参与者的词汇期望是否受到语法性别标记的前名形容词的影响,这些前名形容词支持、反驳或与上下文预测的名词无关。还询问,一旦遇到这些预测线索,它们是否会影响目标整合。
本研究关注语法性别的作用,特别是在形容词上。在西班牙语中,每个名词都有一个阴性或阳性的语法性别,并与之一起存储在心理词典中。此外,冠词、代词和形容词必须在性别上与其相关的名词一致。
本研究的目的是考察句子语境和语法性别线索对词汇预测的影响。具体来说,研究想知道一个前名形容词如果与上下文预期的名词在性别上不匹配,是否会在到达该名词之前触发对预测的快速调整。此外,还研究了更新后的预测是否超过了最初的预期(即,它是否仍然受到句子偏见的影响)。还研究了句子语境和语法性别线索对名词整合的影响,以此作为预测在口语理解中作用的线索。
使用视觉世界范式,我被试在听一个句子片段(如“La bruja volóa La aldea en su…”[女巫乘飞机飞向村庄…])时,眼睛看向四幅图像,这一句子片段建立了对其中一幅显示的名词图像的期望(“期望”,如“escoba”[Bromstickfem])。另一个名词形象在语义上也与句子相容,但不令人期待,而且语法性别相反(“可选”,例如“helicoptero”[helicoptermasc])。剩下的两幅图片是语义上无关的名词,其中一幅与预期名词的性别(“性别填充词”,例如“silla”[chairfem])匹配,另一幅则是相反性别的(“干扰物”,例如“micromonemasc])。关键的是,形容词出现在句子上下文的末尾,就在名词之前,它要么在性别上与预期的名词一致(“一致”;例如“nueva”[newfem]),要么不一致(“不一致”;例如“nuevo”[n e wmasc]),要么是中性的(“中性”;例如“gran”[bigfem/masc])。最后,这个句子由一个在语义上总是可以接受并与形容词的性别相一致的名词结束。
预期:随着句子的展开,以及对可能的补全的限制变得越来越严格,对上下文预期名词(如broomstickfem)图像的注视比例会上升,这反映了预测的逐渐形成。假设在整个过程中都考虑了形态句法性别,当呈现预期性别的形容词(例如newfem)时,预计会看到这种偏向的加强,反映为对预期名词(例如broomstickfem)的更多关注。在不一致的情况下,当遇到一个以性别为标志的形容词与预期的名词不一致时(例如newmasc),预计会看向预期较少但性别匹配的替代图像(例如helicoptermasc)。这表明语法性别是名词期待的一部分,并立即参与指导在线预测。由于中性形容词(例如bigfem/masc)不带有性别指示,因此不能加强或削弱预测,在这种情况下,我们预计会看到语义语境下更多关注预期名词的趋势的简单延续。
三、研究过程 ¶
a、被试 ¶
33名被试,(27名女性,年龄范围19-40岁)以西班牙语为母语,视力正常或矫正至正常,无听力缺陷报告。
b、设计材料 ¶
共构建了78个实验性句子语境,每个语境都旨在为一个特定的名词(称为“expected”)创造期望,该名词前面有一个关键形容词。这些形容词的语法性别被用来创造三个条件:
一致的:形容词与预期的名词一致,后跟名词。
La bruja voló a la aldea en su nueva escoba.
[The witch flew to the village on her new(fem) broomstick(fem)]
不一致:形容词与预期的名词不一致,后面跟着一个替代名词(下文称为“替代”),该替代名词不是期望的,但在语义和语法上与句子一致。
La bruja voló a la aldea en su nuevo helicóptero.
[The witch flew to the village on her new(masc) helicopter(masc)]
中性的:一个形容词,可以在不改变形式的情况下呈现任何性别(此后称为“中性”);后跟预期名词或替代名词。
La bruja voló a la aldea en su gran escoba/helicóptero.
[The witch flew to the village on her big(fem/masc) broomstick(fem) / helicopter(masc)]
因此,每种语境都有三个版本,总共有234个实验句子(见在线补充数据)。这些被分为三个列表,这样每个被试都可以看到每一个句子的上下文,但只能看到其中一个条件(一致、不一致或中性)。对于每个句子,相同的形容词用于一致和不一致的条件,只改变最后一个位置的屈折标记(-o表示阳性,a表示阴性)。在刺激列表中添加了90个在名词前没有形容词的填充句,以使句子结构多样化,并使操作不那么突出。
视觉图片 ¶
共制作了84个展示,每个展示由四幅图像组成,分别描绘了预期的名词(如broomstick(fem))、替代名词(如Helipopter(masc))和两个不相关的异性名词(“性别填充词”,如chair(fem);“干扰物”,如microphone(masc))。这两个不相关的项目(如chairfem和microphonemasc)作为不同句子语境的预期和替代名词(即,在这种情况下,broomstickfem和helicoptermasc作为不相关的项目)。也就是说,每个被试每次试次会展示两次;一次,其中一个名词对是期望项和替代项,另一个名词对是期望项和替代项。图1给出了一个可视化显示的示例。图像的位置因试验而异。
c、程序 ¶
被试坐在一个分辨率为1024×768像素的19′显示器前,用于视觉刺激呈现;听觉记录通过耳机传输。使用SR Research Desktop Mount EyeLink 1000 plus眼动跟踪器以1000 Hz的采样率记录单眼眼球运动。在开始实验之前,使用标准九点程序进行校准和验证。 校准后,屏幕上会显示任务的书面说明,直到被试按键开始实验。每个试次都以展示四幅图像中间有一个红色圆圈的图像开始。500毫秒后,红色圆圈变成绿色,提示参与者点击它。这使得在听觉刺激开始之前可以对图像进行简要的观察,从而最大限度地减少视觉搜索引起的眼球运动。 点击后,圆圈和光标从屏幕上消失,开始播放口语句子。播音结束后,光标再次出现在屏幕上,被试需要点击描述听觉句子中最后一个名词的图像,从而终止试次并继续进行下一个试次。
d、数据分析 ¶
对于统计分析,研究关注了四个感兴趣的时间窗口,如图2所示。第一个时间窗口(上下文结束)捕获了前一句话上下文的最后400ms,该上下文在不同条件下是相等的,选择它是为了反映基于约束语句的特定图像类型的预期。第二个时间窗口(形容词)涵盖形容词持续时间,即三种实验条件下刺激物发散的时间点。第三个时间窗口(形容词偏移-名词开始)限制在形容词偏移和名词开始之间,这是达到预测项目前成功调整的关键轨迹。第四个时间窗口(名词)涵盖名词的持续时间,最终呈现目标词。
图3显示了一个时间进程图,绘制了固定在预期(如“escoba”[broomstickfem])和替代(如“Helicoptero”[helicoptermasc])名词图像上的试次比例,分别显示了三种听觉刺激条件(一致、不一致、中性)中的每一种。
四、讨论及其他 ¶
结果显示,与句子结尾处的替代名词(如HelipopterMasc)相比,在句子结尾处的预期名词(如broomstickfem)更受关注。总之,研究表明,在口语理解过程中,人们使用句子语境来预测特定的单词,并在新信息(如性别标记)到来时迅速调整这些预期。此外,即使在目标词被揭示之后,先前语境和性别线索的影响也很明显,这证实了预测在词整合中所起的重要作用。