붉은색이 시험 성적을 떨어뜨린다는 가설, 메타분석에서는 증거가 남지 않았습니다
알려진 것: 이 논문이 요약한 가설
붉은색을 보면 성취 상황에서 인지 기능이 영향을 받아 시험 수행이 떨어진다는 가설이 있습니다. 이번에 확인한 메타분석 연구팀은 그 통념을 다음 한 문장으로 요약했습니다. ‘supposedly(그렇다고 여겨지는)‘라는 단서가 붙어 있다는 점을 먼저 짚어 둡니다.
“Red color supposedly affects cognitive functioning in achievement situations and impairs test performance.”
이 통념의 근거로 적힌 서지는 Elliot et al. (2007)입니다.
실제로 확인한 것: 메타분석 결과
연구팀은 38개 표본에서 나온 67개 효과 크기를 무작위 효과 메타분석으로 묶었습니다. 결과는 과제 종류에 따라 갈렸습니다.
첫째, 아나그램 검사와 일반 상식 검사에서는 색 조건 사이에 유의한 차이가 없었습니다.
둘째, 추론 검사에서는 통합 효과가 유의했고, 붉은색 조건의 점수가 더 낮았습니다.
“For anagram tests and knowledge tests no significant difference between color conditions was found (Cohen’s d of -0.06 and -0.04); for reasoning tests the pooled effect of d = -0.34, 95% CI [-0.61, -0.06] indicated significantly lower scores in the red condition.”
셋째, 추론 검사의 통합 효과와는 별개로, 연구팀은 누적 메타분석에서 초기 연구들의 효과가 후속 연구보다 실질적으로 컸다는 것을 확인했습니다. 그리고 출판 편향을 보정하자, 붉은색이 지적 수행에 영향을 준다는 증거 가치는 남지 않았습니다.
“The cumulative meta-analysis revealed substantially larger effects in initial studies as compared to subsequent research. After correcting for publication bias no evidential value for an effect of red color on intellectual performance was available.”
둘의 차이: 이 메타분석에서 유의한 통합 효과와 증거 가치는 다른 결과입니다
여기서 두 결과를 합치지 않는 것이 중요합니다. 추론 검사의 통합 효과가 유의했다는 것과, 초기 연구의 효과가 후속 연구보다 컸다는 것은 서로 다른 분석에서 나온 별개의 결과입니다. 전자만 보면 추론 과제에서는 붉은색 효과가 있다고 읽힐 수 있습니다. 그러나 연구팀은 출판 편향 보정 뒤에는 붉은색이 지적 수행에 영향을 준다는 증거 가치가 없다고 보고했고, 성취 상황에서 강건한 색 점화 효과가 존재하는지에 의문을 제기했습니다.
“The review casts doubt on the existence of a robust color-priming effect in achievement situations.”
그래서 무엇이 달라지는가
- 이 메타분석의 범위 안에서는, 아나그램과 일반 상식 검사에서 붉은색이 성적을 떨어뜨린다는 결과가 확인되지 않았습니다.
- 추론 검사에서는 유의한 통합 효과가 있었지만, 연구팀은 출판 편향 보정 뒤 붉은색이 지적 수행에 영향을 준다는 증거 가치를 확보하지 못했다고 보고했습니다.
- 연구팀의 결론은 효과가 없다는 증명이 아니라, 강건한 효과의 존재에 의문이 있다는 것입니다.
붉은색이 시험 성적을 떨어뜨린다는 말을 다음에 접하면, 그것이 초기 연구의 결과인지 출판 편향 보정까지 거친 결과인지를 먼저 확인해 보시기 바랍니다.
궁금한 점이나 틀린 내용이 있으면 pikanostudio@gmail.com으로 메일 주세요.