《Cognition》:Postural configurations as micro-ecological constraints: How embodied arrangements shape the emergence of bodily-visual communication
编辑推荐:
具身构型如何塑造沟通的涌现?研究人员考察了身体-视觉沟通在两种互动安排下的发展:站立开放(standing-open)与坐姿桌前(seated-at-table)。70个双人组(140名参与者)在一项指称交流任务(referential communicati
具身构型如何塑造沟通的涌现?研究人员考察了身体-视觉沟通在两种互动安排下的发展:站立开放(standing-open)与坐姿桌前(seated-at-table)。70个双人组(140名参与者)在一项指称交流任务(referential communication task)中进行了三轮互动,为32个意义创造了全新的无言语信号,同时使用高分辨率动作捕捉(motion capture)记录其运动。在两种构型中,双人组均表现出稳健的效率动态:交际成功(communicative success)提高,运动路径(movement path)和运动体积(movement volume)下降,发音器特化(articulatory specialisation)增强,对话者之间的运动学对齐(kinematic alignment)增加。然而,构型效应最清晰地体现在基于运动的指标中,而非交际成功上。两种构型中的成功均快速提升,仅有微弱且短暂证据支持早期站立开放优势。相比之下,坐姿桌前互动促进了更紧凑的运动和手指特化(digital specialisation),而站立开放互动涉及较大幅度的运动和渐进性臂手特化(brachiomanual specialisation)。达到相似对齐水平的路径也不同:站立开放构型中的参与者以线性方式收敛,而坐姿桌前双人组在实验中段迅速收敛,随后松弛至站立开放构型最终达到的水平。这些发现表明,具身安排并不主要决定沟通能否成功,而是塑造了交际效率如何在身体运动中得到实现。
沟通系统如何在生态与互动约束下涌现并稳定,是认知科学与语言学的核心问题。已有研究强调姿态、朝向、可见性和空间组织构成互动结构的一部分,但姿态构型作为实验变量如何影响新兴交流系统的发展,尚未得到系统检验。既有实验符号学(experimental semiotics,通过受控互动考察交流系统涌现的范式)研究多将坐姿或站姿当作任务背景而非理论目标。为填补这一空白,研究人员将站立开放(standing-open)与坐姿桌前(seated-at-table)两种生态连贯的安排视为微观生态约束(micro-ecological constraint,由身体位置、运动空间、发音器可用性、下半身可见性和家具共同构成的互动条件),考察它们如何影响身体-视觉沟通(bodily-visual communication,不依赖言语、通过身体动作实现的交流)在指称交流任务(referential communication task,发送者产生信号、猜测者选择意义的任务)中的涌现。
研究人员招募了159名波兰语母语被试,排除后N=140,组成70个双人组,随机分配到站立开放或坐姿桌前构型,完成三轮指称交流任务。关键技术包括:Rokoko SmartSuit Pro II与SmartGloves惯性动作捕捉系统(采样率100 Hz,角度精度±1°)记录全身与手指运动;PsychoPy呈现刺激并记录反应;以运动路径、凸包体积(convex hull volume)量化运动经济性;以关节运动占比量化发音器特化(articulatory specialisation);以形状动态时间规整(shapeDTW)计算对话者运动轨迹相似性;采用贝叶斯多层回归(Bayesian hierarchical regression)进行推断。
结果:
【跨构型的基线效率动态】贝叶斯多层模型显示,猜测正确率从第1轮到第3轮显著上升(总log-odds增幅2.58,89% CI [2.39, 2.78]);运动路径(β=-0.44)与凸包体积(β=-0.26)下降;发音器特化增强;对话者间DTW距离下降,支持了基线效率动态假设。
【构型依赖效应】交际成功方面,站立开放仅在第1–2轮有微弱数值优势且89%可信区间包含零,第3轮消失,H1a未获支持;运动经济性方面,坐姿桌前全程更经济且下降略陡,与H2a预测方向相反;发音器特化方面,站立开放向臂手集中(路径比β=0.12),坐姿桌前向手指集中(路径比β=0.13),支持H3a、H3b;对齐方面,坐姿桌前前两轮DTW距离更低,第3轮条件差异消失,H4a获得时间限定性支持。
讨论:
【交际成功】交际成功对重复互动高度稳健,构型差异微弱且短暂,表明构型不决定能否建立共享形式-意义映射。
【交际经济性】坐姿桌前通过稳定紧凑的表达场促进了信号缩减,站立开放未因初始动作更大而产生更强压缩。
【发音器特化】两种构型均出现特化,但方向不同,说明互动经验与具身可供性共同塑造交际负荷的再分配。
【对齐】坐姿桌前加速早期运动学收敛,站立开放以线性方式达到相近水平;由于DTW基于z标准化轨迹,该差异不能归因于动作幅度。
【总体讨论】构型效应最清晰地体现在运动学维度而非交际成功上;效率是成功、缩减、特化与对齐等压力的组合,其相对表达取决于微观生态条件。研究局限包括仅比较两种构型、构型成分无法分离、未编码表征策略、任务为受控双人游戏。
研究结论(翻译):本研究提供了身体-视觉沟通在两种具身互动构型下如何发展的实验解释。通过指称游戏范式和动作捕捉,研究人员追踪了交际成功、运动经济性、发音器特化和运动学对齐在重复互动中的涌现与变化。结果表明,不同构型下出现稳健的效率动态:两种条件下交际成功均提高,运动路径和体积下降,发音器特化增强,对话者运动轨迹更加对齐;但这些动态并非以完全相同的方式实现。交际成功在构型间大致稳健,而运动学测量显示出更清晰的构型依赖路径。因此,本研究将交际效率重新定义为一种运动学上分布的过程:成功、缩减、特化与对齐共同发展,但基于运动的维度揭示了不同具身安排如何引导这一过程——使用了多少运动、交际负荷集中在哪里、运动学收敛轨迹如何展开。姿态构型因此充当了可操作的微观生态约束:站立开放与坐姿桌前安排并不决定交流能否成功,也不产生性质不同的交际规约,而是塑造了同一身体-视觉任务如何通过运动解决。更广泛地说,这些发现支持具身和生态的沟通观:交际结构不仅产生于社会与认知压力,也产生于情境化互动的直接身体与知觉可供性;身体、空间、可见性和物质安排不仅是沟通的背景条件,也帮助塑造协调在实时中的展开方式。