마시멜로 실험, SAT 상관의 표본은 35명이었다 — 2018년 재현에서 통제 후 연관은 0.05였다

작성자

카테고리:

"마시멜로를 참은 아이가 커서 성공한다"는 통념의 근거가 된 1990년 논문에서, 유명한 SAT 상관계수가 나온 집단은 35명이었고, 저자들 스스로 "해석에 주의가 필요하다"고 적어 두었다. 2018년에 918명 코호트로 수행된 개념적 재현 연구는 가정 배경과 초기 인지능력을 통제하자 지연 시간과 15세 학업 성취의 연관이 크게 줄었다고 보고했다. 이 글은 두 논문의 무료 공개 전문을 열어, 통념과 원문 사이에 무엇이 남고 무엇이 빠졌는지 대조한다.

대조한 자료

역할

자료

발행

지위

확인 범위

원출처

Shoda, Mischel & Peake, "Predicting Adolescent Cognitive and Self-Regulatory Competencies From Preschool Delay of Gratification"

Developmental Psychology 26(6), 978–986, 1990

동료심사 논문

공개 PDF 전문 확인 (표본·상관표·고찰의 주의 문구까지)

검증(개념적 재현)

Watts, Duncan & Quan, "Revisiting the Marshmallow Test: A Conceptual Replication"

Psychological Science 29(7), 1159–1177, 2018

동료심사 논문

공개 PDF 전문 확인 (방법·계수·결론·한계까지)

통념은 이렇게 말한다

널리 유통되는 형태는 이렇다. 스탠퍼드의 마시멜로 실험에서 눈앞의 마시멜로를 먹지 않고 참아낸 네 살짜리 아이들은 10여 년 뒤 SAT 점수가 높았고, 학업과 대인관계에서도 더 성공적이었다. 그러므로 어릴 때의 자제력, 즉 만족을 미루는 능력이 인생의 성공을 예측한다. 한국어 검색 결과에서도 이 실험은 자기계발서와 교육 콘텐츠의 단골 근거로 반복 인용된다.

원문에는 이렇게 적혀 있다

1990년 논문에 따르면 1968~1974년 스탠퍼드 빙 유아원에서 실험에 참여한 어린이는 모두 653명이고, 청소년기 SAT 점수가 확보된 사례는 94명이다. 유명한 상관 — 언어 .42, 수리 .57 — 은 그중에서도 보상이 눈앞에 노출되고 별도의 사고 전략을 제시하지 않은, 원 논문이 "진단적(diagnostic)"이라고 부른 조건에서 SAT 자료가 함께 확보된 35명에게서 나온 숫자다. 보상을 가려 둔 조건이나 전략을 제시한 조건들에서는 상관이 유의하지 않았고 부호가 음(-)인 경우도 있었다.

저자들은 이 숫자를 그대로 믿지 말라고 본문에 적었다. "얻어진 계수는 실제 연관의 크기를 충분히 과장하고 있을 수 있다(the obtained coefficients could very well exaggerate the magnitude of the true association)"며, 진단적 조건에서 지연 시간과 SAT 상관의 95% 신뢰구간이 언어 .10~.66, 수리 .29~.76이라고 직접 예시했다. 두 신뢰구간 모두 0을 포함하지 않지만, 언어 쪽 하한은 .10까지 내려간다. 이어서 "전체 결과의 해석에는 주의가 필요함을 강조해야 한다(We must emphasize the need for caution in the interpretation of the total findings)", "가장 높은 상관조차 분산의 약 25%만을 설명한다(even the highest correlations account for only about 25% of the variance)"고 썼고, 다른 집단·코호트에서의 재현이 다음 단계로 필요하다고 명시했다.

2018년 개념적 재현 연구의 유효 표본은 미국 NICHD 아동 코호트 918명이었다. 아이들은 54개월(만 4세 6개월) 시점에 상한 7분의 지연 과제를 수행했다. 분석의 중심은 어머니가 대학을 졸업하지 않은 552명 표본이었다. 이 표본에서 지연 시간과 15세 학업 성취의 표준화 계수는 통제 전 0.24(p<.001)였으나, 가정 배경·가정환경을 통제하자 0.08(p=.016), 54개월 시점의 인지·행동 변수까지 추가하자 0.05(p=.140)로 줄어 유의하지 않았다. 어머니가 대졸인 366명 표본에서는 모든 통제를 넣은 계수가 0.007이었다. 저자들의 결론 문장은 이렇다. "이변량 상관은 원 연구들이 보고한 것의 절반 크기였고, 가정 배경·초기 인지능력·가정환경을 통제하자 3분의 2가 줄었다(The bivariate correlation was only half the size of those reported in the original studies, and was reduced by two-thirds in the presence of controls)." 한편 15세 행동 문제와의 연관은 통제 후에 사라진 것이 아니라, 비대졸 표본에서는 통제 전부터 작고 대부분 유의하지 않았으며, 대졸 표본에서는 연관의 증거가 확인되지 않았다.

어디서 갈라졌나

이 대조에서 눈에 띄는 것은, 통념이 원문을 왜곡했다기보다 원문에 있던 단서들을 떨어뜨렸다는 점이다. 조건 구분(상관은 네 조건 중 한 조건에서만 나왔다), 표본 크기(35명), 신뢰구간(.10~.66, .29~.76), 그리고 저자들 자신의 주의 문구가 유통 과정에서 흔히 생략된다. 이 글은 원 논문과 재현 논문 두 편만 문서 단위로 대조했고, 그 사이의 확산 경로(대중서·강연·언론)는 개별 문서로 추적하지 않았다.

그럼에도 남는 것

원문이 부정하지 않은 것도 분명히 있다. 1990년 논문의 진단적 조건 상관은 실제로 보고된 결과이고, 신뢰구간은 0을 포함하지 않았다. 2018년 재현에서도 통제 전에는 통계적으로 유의한 양(+)의 연관이 관찰됐다. 저자들은 "청소년기 성취 변산의 대부분은 최소 20초를 기다릴 수 있었는지에서 나왔다(Most of the variation in adolescent achievement came from being able to wait at least 20 s)"고 적었는데, 이는 15세 학업 성취와의 관계가 주로 20초 미만으로 기다린 집단과 그 이상 기다린 집단의 차이에서 나타났고, 20초 이상 기다린 집단들 사이의 차이는 배경 변수를 통제하자 평평해졌다는 뜻이다. 마시멜로 과제가 자기통제만이 아니라 초기 인지능력·환경과 함께 움직이는 지표일 가능성은 두 논문 모두 열어 두고 있다.

이 대조가 말하지 않는 것

재현 연구는 "자제력이 쓸모없다"는 증명이 아니다. 통제 후 유의하지 않다는 것과 효과가 없음이 증명됐다는 것은 다르다. 두 연구 모두 미국 표본이고, 재현 연구 저자들 스스로 "전국 대표성 있게 추출되지 않은 자료는 일반화에 불안한 기반(a shaky foundation for generalization)"이라고 적었다. 설계도 같지 않다 — 원 연구는 보상 노출 여부와 전략 제시 여부를 달리한 여러 실험 조건을 비교했고, 2018년 연구는 다른 코호트에서 7분 상한의 과제를 썼다. 그 상한 탓에 대졸 가정 표본의 68%, 비대졸 가정 표본의 45%가 끝까지 기다려 천장에 닿았다. 그리고 두 연구 모두 유아기 지연 시간과 이후 성취 사이의 관찰된 연관을 분석한 것이므로, 지연 시간 자체가 이후 성취를 높였다는 인과적 결론은 어느 쪽에서도 내릴 수 없다.

정리하면

  • 유명한 SAT 상관(언어 .42, 수리 .57)은 653명 중 SAT가 확보된 94명, 그중에서도 진단적 조건의 35명에게서 나온 숫자다.
  • 1990년 원 논문 저자들은 과장 가능성, .10~.66과 .29~.76의 신뢰구간, 해석 주의, 재현 필요를 본문에 직접 적었다.
  • 2018년 개념적 재현(유효 표본 918명)의 핵심 분석인 비대졸 어머니 표본 552명에서, 통제 전 계수 0.24(p<.001)는 통제 후 0.05(p=.140)로 줄어 유의하지 않았다.
  • 통제 전의 유의한 연관과 20초 문턱의 변별력은 재현에서도 관찰됐다 — "효과 없음의 증명"은 아니다.
  • 통념은 원문의 숫자에서 출발하지만, 원문에 함께 적혀 있던 조건·표본 크기·주의 문구는 흔히 생략된 채 유통된다.

출처와 확인 범위

  • Shoda, Y., Mischel, W., & Peake, P. K. (1990). Predicting Adolescent Cognitive and Self-Regulatory Competencies From Preschool Delay of Gratification. Developmental Psychology, 26(6), 978–986. 스미스칼리지 ScholarWorks 공개 PDF로 전문 확인 — 표본 구성, 상관표(표 4), 고찰의 신뢰구간·주의 문구까지 읽음. https://scholarworks.smith.edu/psy_facpubs/79
  • Watts, T. W., Duncan, G. J., & Quan, H. (2018). Revisiting the Marshmallow Test: A Conceptual Replication Investigating Links Between Early Delay of Gratification and Later Outcomes. Psychological Science, 29(7), 1159–1177. 웹에 공개 게시된 전문 PDF로 확인 — 표본·계수·결론·한계 절까지 읽음 (PMC6050075로도 공개돼 있으며, 서지사항은 출판사 페이지에서 확인). https://doi.org/10.1177/0956797618761661
  • 통념의 유통 형태와 검색 수요: 한국어 웹 검색 1회로 기사·블로그 다수를 제목 수준에서 확인함 (개별 본문은 열지 않음).

뉴스 레터 구독하기

개인정보 수집 및 이용

뉴스레터 발송을 위한 최소한의 개인정보를 수집하고 이용합니다. 수집된 정보는 발송 외 다른 목적으로 이용되지 않으며, 서비스가 종료되거나 구독을 해지할 경우 즉시 파기됩니다.