그릿 원 연구 초록과 메타분석 초록을 나란히 읽었습니다
그릿(열정과 끈기)이 성공을 얼마나 설명하느냐는 질문에, 서로 다른 두 초록이 각자 답을 내놓고 있습니다. 하나는 그릿의 예측력을 주장한 원 연구의 초록이고, 다른 하나는 그릿 연구들을 모아 다시 분석한 메타분석의 초록입니다. 이번에 두 초록의 문장을 원문과 대조해 확인했습니다. 결론부터 말씀드리면, 두 문장은 한쪽이 다른 쪽을 반박하는 관계로 읽히지 않습니다. 그리고 지금 손에 든 발췌만으로는 가장 궁금한 질문에 답할 수 없었습니다.
원 연구 초록이 말한 것
원 연구 초록에는 이런 문장이 있습니다.
“Grit nonetheless demonstrated incremental predictive validity of success measures over and beyond IQ and conscientiousness.”
옮기면 이렇습니다. 그릿은 그럼에도 IQ와 성실성을 넘어 성공 지표에 대한 추가 예측 타당도를 보였다는 주장입니다. 초록은 이어서, 어려운 목표를 이루려면 재능뿐 아니라 시간에 걸쳐 재능을 꾸준하고 집중적으로 쓰는 일도 필요하다는 해석으로 맺습니다.
여기서 핵심 낱말은 “추가"입니다. 원 연구 초록은 그릿이 성공을 예측한다고만 말하지 않습니다. 지능과 성실성으로 이미 설명되는 부분 위에 그릿이 더 설명하는 몫이 있다고 주장합니다.
메타분석 초록이 보고한 것
메타분석 초록은 이렇게 적었습니다.
“Our results based on 584 effect sizes from 88 independent samples representing 66,807 individuals indicate that the higher order structure of grit is not confirmed, that grit is only moderately correlated with performance and retention, and that grit is very strongly correlated with conscientiousness.”
이 메타분석은 88개 독립 표본, 66,807명에게서 나온 584개 효과크기를 모아 분석했습니다.
그 결과로 세 가지를 보고했습니다.
- 그릿의 고차 구조는 확인되지 않았습니다.
- 그릿은 성과·유지와 중간 정도로 상관했습니다.
- 그릿은 성실성과 매우 강하게 상관했습니다.
두 문장을 함께 놓으면
두 초록을 나란히 놓으면 어긋나 보이는 지점이 있습니다. 원 연구 초록은 그릿이 성실성을 넘어서는 추가 예측 타당도를 보였다고 주장했고, 메타분석 초록은 그릿이 성실성과 매우 강하게 상관한다고 보고했습니다.
하지만 이 둘을 반박 관계로 놓을 수는 없습니다. 두 문장은 서로 다른 질문에 답하고 있습니다. “그릿과 성실성이 얼마나 함께 움직이는가"와 “성실성을 고려한 뒤에도 그릿이 성공을 더 설명하는가"는 같은 질문이 아닙니다. 이번에 확보한 메타분석 발췌에는 성실성을 고려한 뒤의 추가 예측력에 관한 결과가 담겨 있지 않습니다. 그래서 지금 가진 발췌로는 그릿에 추가 예측력이 있는지 없는지 판정할 수 없습니다.
고차 구조가 확인되지 않았다는 결과는 메타분석이 따로 보고한 것입니다. 이번에 확인한 원 연구 초록 발췌는 이 점을 다루지 않습니다.
그래서 무엇이 달라지는가
이번에 원문으로 확인한 것은 두 가지입니다. 원 연구 초록은 지능과 성실성을 넘어서는 추가 예측 타당도를 주장했습니다. 메타분석 초록은 그릿과 성실성 사이의 매우 강한 상관을 보고했습니다. 이 두 내용이 함께 존재한다는 사실이 이번 확인의 범위입니다.
앞으로 “그릿이 성공을 예측한다"는 문장을 만나면 그 문장이 어느 쪽을 말하는지 나눠 읽을 수 있습니다. 하나는 그릿과 성과의 상관입니다. 메타분석 초록은 이 상관을 성과·유지에 대해 중간 정도로 보고했습니다. 다른 하나는 성실성 위에 더해지는 몫입니다. 이 주장은 원 연구 초록에 있지만, 이번에 확인한 메타분석 발췌로는 이 주장을 확인할 수도 반박할 수도 없습니다.
이 글은 그릿이 쓸모없다고 말하지 않습니다. 성격 특성 일반이 쓸모없다는 주장도 아닙니다. 두 초록이 각각 무엇을 말했고 무엇을 말하지 않았는지를 원문 문장으로 확인한 기록입니다.