체화된 인지의 대표 결과 ACE, 후속 실험의 읽기 시간에서는 관찰되지 않았습니다

· 약 3분

언어를 이해하는 데 운동 체계가 관여한다는 생각이 있습니다. 이 생각을 받치는 대표적 결과로 소개되어 온 것이 행동-문장 호환성 효과, 줄여서 ACE입니다. 그런데 「Just Out of Reach: On the Reliability of the Action-Sentence Compatibility Effect」라는 논문을 쓴 연구팀은 후속 실험에서 이 효과를 관찰하지 못했고, 효과를 지지하는 증거가 전반적으로 약하다고 보고했습니다.

알려진 것: 초록이 소개한 ACE

연구팀은 초록 첫머리에서 ACE를 이렇게 소개합니다.

The action-sentence compatibility effect (ACE; Glenberg & Kaschak, 2002), a hallmark finding in Embodied Cognition, implicates the motor system in language comprehension. In the ACE, people process sentences implying movement toward or away from themselves, responding with actions toward or away from their bodies.

연구팀의 소개에 따르면 ACE는 체화된 인지(Embodied Cognition)의 대표적 결과이고, 언어 이해에 운동 체계가 관여함을 시사합니다. 과제의 모양도 같은 대목에 나옵니다. 사람들은 자기 쪽으로 다가오거나 자기에게서 멀어지는 움직임을 담은 문장을 처리하고, 몸 쪽으로 향하거나 몸에서 멀어지는 동작으로 응답합니다.

연구팀이 확인한 것: 후속 실험에서는 관찰되지 않았습니다

연구팀은 8개 실험을 했고, 마우스 추적과 버튼 반응 두 가지 응답 방식을 썼으며, 원 연구의 자극도 포함했습니다. 측정한 것은 읽기 시간과 물리적 이동 시간이고, 여기에 베이즈 분석을 더했습니다. 결과는 연구팀의 문장으로 옮깁니다.

In further experiments, the ACE was not observed in reading times, regardless of response mode (mouse movements vs. button-presses) or stimuli, including those from the original research. Similarly, no ACE was observed in physical movement times. Bayes Factor analyses of the current experiments, and the previous ACE literature, suggest that the evidence for the ACE is generally weak: Many studies considered as positive evidence actually support the null hypothesis, and very few published results offer strong evidence for the ACE.

이 초록 대목에서 연구팀이 보고한 것은 세 가지입니다.

  1. 후속 실험의 읽기 시간에서 ACE는 관찰되지 않았습니다. 응답을 마우스 움직임으로 받든 버튼 누르기로 받든, 자극이 원 연구의 것이든 아니든 마찬가지였습니다.
  2. 물리적 이동 시간에서도 ACE는 관찰되지 않았습니다.
  3. 이번 실험들과 기존 ACE 문헌에 베이즈 요인 분석을 적용한 연구팀은 ACE를 지지하는 증거가 전반적으로 약하다고 봤습니다.

둘의 차이: 대표적 결과라는 자리와, 이 분석이 본 증거의 세기

연구팀은 긍정적 증거로 여겨지던 연구 가운데 다수가 실제로는 영가설을 지지하고, ACE에 강한 증거를 주는 출판 결과는 매우 적다고 썼습니다. ‘대표적 결과’라는 자리와 ‘전반적으로 약한 증거’라는 평가가 한 초록 안에 나란히 놓여 있는 셈입니다. 적어도 이 분석에서는, 긍정 사례로 세던 연구의 개수가 곧 증거의 세기는 아니었습니다.

이 글이 확인한 범위

인용한 대목은 ‘In further experiments’, 곧 후속 실험이라는 말로 시작합니다. 그 앞선 실험에서 무엇이 나왔는지는 이 글이 확인한 발췌에 없으므로, 8개 실험 전부에서 효과가 없었다고 쓸 수는 없습니다. 또 발췌가 말하는 것은 ACE라는 한 효과의 증거가 약하다는 것이지, 체화된 인지 전체에 대한 판정이 아닙니다.

ACE를 근거로 든 글을 만나면, 효과가 ‘보고됐다’는 사실에서 멈추지 말고 그 결과가 얼마나 강한 증거였는지를 한 번 더 물어보시기 바랍니다.

궁금한 점이나 틀린 내용이 있으면 pikanostudio@gmail.com으로 메일 주세요.