Comparing human-made and AI-generated teaching videos: An experimental study on learning effects

Summary

발행일자	2024. 9.
연구목적	AI 생성 교육 비디오가 학습자에게 효과적으로 학습 경험을 제공할 수 있는지를 검토하고, 인간이 제작한 비디오와 AI가 제작한 비디오 간 학습 성과의 차이를 평가하는 것
연구대상	Amazon Mechanical Turk을 통해 모집된 447명의 미국 거주 참가자
연구방법	실험 연구
연구결과	- 학습 경험: 인간이 제작한 비디오가 AI 제작 비디오에 비해 학습 경험에서 통계적으로 유의미하게 더 높은 평가를 받았으나 차이는 실질적으로 크지 않았음. AI 비디오도 긍정적인 반응을 얻었음.

학습 성과: 시험 결과를 통해 학습 성과에서는 인간 제작 비디오와 AI 제작 비디오 간에 유의미한 차이가 없었음. 이는 학습 경험에서는 인간 제작 비디오가 약간 더 나았지만, 실제 학습 성과에는 큰 차이가 없음을 나타냄. | | 키워드 | Data science applications in education Distance education and online learning Applications in subject areas |

연구 배경: 2022년 11월 ChatGPT 3.5의 출시로 대형 언어 모델이 대중에게 본격적으로 공개됨. AI가 교육 모델을 변화시킬 가능성 증가
연구 목적: 인간 제작 비디오와 AI 생성 비디오의 학습 경험 및 학습 성과를 비교하고자 함.
비디오 주제: 작업 공간 조직(5S), 문제 해결(TRIZ), 적시 생산(JIT)과 칸반, 경제적 주문량(EOQ) 등 경영 운영 관리 주요 개념
비디오 제작: ChatGPT 3.5로 스크립트 작성, Midjourney와 Dall-E로 비주얼 제작, Movio로 아바타와 오디오 생성
실험 설계: 447명의 참가자를 대상으로 AI와 인간 비디오 조합 순서를 무작위 배치하여 학습 경험 평가 및 시험을 통한 학습 성과 측정

온라인 교육 확산 배경: 온라인 및 비동기 학습이 접근성과 편리성, 디지털 네이티브의 교육 현장 진입, 팬데믹으로 인한 원격 수업 경험 등으로 확대됨(Beege et al., 2022; Sablic et al., 2021).
교육 영상의 변화: 전통적으로 인간 교사와 교육 기술 전문가가 제작하던 교육 영상이 생성형 AI의 발전으로 AI가 교육 영상 제작을 대체할 가능성 있음(Jeon et al., 2023; Lim et al., 2023).
생성형 AI의 장점: AI 시스템은 데이터 분석을 통해 학습자 맞춤형 고품질 교육 영상을 제작할 수 있으며 다양한 학습 선호를 반영하는 텍스트, 오디오, 비주얼을 통합할 수 있음.
학습 경험과 학습 성과 구분(Allan, 1996):
- 학습 경험: 학습자가 느끼는 인지적·정서적·사회적 참여
- 학습 성과: 학습자가 얻는 측정할 수 있는 지식과 능력