OpenAI의 ChatGPT가 학생 학습에 긍정적인 영향을 미칠 수 있다고 주장한 연구는 출판 후 거의 1년 동안 철회되었습니다. 저널 출판사인 Springer Nature는 분석의 “불일치”와 결론에 대한 신뢰도 부족을 언급했습니다. 하지만 그 전에는 해당 논문이 수백 번 인용되고 소셜 미디어에 퍼지기 전에는 그렇지 않았습니다.
디지털 교육 연구 센터와 스코틀랜드 에든버러 대학의 에딘버러 미래 연구소의 수석 강사인 벤 윌리엄슨은 Ars에 보낸 이메일에서 “이 논문의 저자들은 ChatGPT가 학습 결과에 미치는 이점에 대해 매우 주목할만한 주장을 했습니다.”라고 말했습니다. “ChatGPT와 더 광범위하게는 생성 AI가 학습자에게 도움이 된다는 확실한 최초의 표준 증거 중 하나로 소셜 미디어에서 많은 사람들이 이를 다루었습니다.”
철회된 논문은 51개의 이전 연구 결과를 분석하여 “학생의 학습 성과, 학습 인식 및 고차원적 사고에 대한 ChatGPT의 효과”를 정량화하려고 시도했습니다. 메타분석을 통해 교육에서 ChatGPT를 사용한 다양한 연구의 실험그룹과 AI 챗봇을 사용하지 않은 통제그룹 간의 효과크기를 계산했습니다.
해당 분석은 “ChatGPT가 학습 성과 향상에 큰 긍정적 영향을 미치는 것”과 “학습 인식 향상에 어느 정도 긍정적인 영향” 및 “고차원적 사고 육성”을 보여주는 것으로 추정됩니다. 현재 철회된 결과는 2025년 5월 6일 Springer Nature에서 발행되는 Humanities & Social Sciences Communications 저널에 처음 게재되었습니다.
Williamson은 Ars에 “어떤 경우에는 품질이 매우 낮은 연구를 종합하거나 매우 다른 방법, 모집단 및 샘플로 인해 정확하게 비교할 수 없는 연구 결과를 혼합한 것으로 보입니다.”라고 말했습니다. “정말 애초에 출판되어서는 안 될 논문 같았어요.”
Williamson은 또한 OpenAI가 2022년 11월 ChatGPT를 출시한 지 불과 2년 반 만에 이 논문의 출판 시기에 대해 의문을 제기했습니다. Williamson은 “ChatGPT 및 학습 성과에 대한 수십 개의 고품질 연구가 그 당시에 수행, 검토 및 출판될 수 있었다는 것은 실현 가능하지 않습니다”라고 말했습니다.
철회보다 오래 지속될 수 있는 유산
이 연구는 출판 이후 Springer Nature의 동료 심사 저널에 발표된 다른 논문에서 262회 인용되었으며, 동료 심사 및 비심사 출처 모두에서 총 504회 인용되었습니다. 또한 거의 50만 명의 독자를 끌어 모았으며 관심 점수 측면에서 저널 기사의 99번째 백분위수에 포함될 만큼 충분한 온라인 관심을 받았습니다.
관련 정보는 아래 링크에서 확인하세요
