AI 기반 실시간 상호작용형 미래 교원 양성 VR 콘텐츠

AI 기반 실시간 상호작용형 미래 교원 양성 VR 콘텐츠

OWLIX AI VR 콘텐츠 - 부산교육대학교 1차 TSR Pilot

" AI 기반의 상호작용형 교육 서비스를 통해 예비 교사의 수업 지도 능력, 의사소통 및 문제 해결 능력을 효과적으로 평가하고 개선합니다. "


체험자의 발화 내용을 기반으로 한 AI 평가	AI 학생의 질문, 체험자의 답변	교수자 맞춤 설정을 통한 질문 유형 및 평가 기준 설정 가능	미래지향적 교실 디자인

INTRO

실습 기회 부족 · 객관적 평가의 어려움 · 즉각적 피드백 부재 · 다양한 상황 대처 능력 · 의사소통 훈련

기존 예비교사 교육은 이론 중심이거나, 실제 학생을 대상으로 한 실습 기회가 제한적이었습니다. 실제 수업에서 발생할 수 있는 다양한 변수에 대처하고, 학생과의 의사소통 능력을 객관적으로 평가하며, 즉각적인 피드백을 통해 지도 역량을 개선하는 데 한계가 있었습니다.


실제 학습 시 보여지는 콘텐츠 화면	외부에서 진행하는 장면

SOLUTION :

1차 TSR Pilot은 Unreal Engine 기반 가상환경 인터페이스와 중앙 관리 서버를 연동하여 이 문제를 해결합니다. 체험자는 가상 교실에서 로컬 AI 파이프라인과 연동된 AI 학생들과 상호작용합니다. 교수자는 웹을 통해 실시간으로 수업을 생성, 관제하고, 모든 데이터는 중앙 서버(SQLite)에 집계되어 AI 평가 리포트로 생성됩니다.

1. 중앙 관리 서버(Professor PC)	RESTful API 기반. 수업 오케스트레이션, PDF 교재 배포, 실시간 모니터링, 최종 보고서 통합 관리
2. 통합 클라이언트(Trainee PC)	Python 클라이언트와 Unreal Engine 클라이언트로 구성, Python 클라이언트가 중앙 서버와 Unreal Engine의 브로커 역할 수행
3. 로컬 AI 파이프라인	클라이언트 PC에서 STT, LLM, TTS 파이프라인 처리
4. 가상환경 인터페이스	Unreal Engine 기반의 사용자 인터페이스로 HMD와 컨트롤러를 통해 상호작용
5. AI 평가 시스템	예비교사의 수업 및 답변 내용에 기반하여 , 설정된 평가 기준에 따라 총점, 강점, 개선 영역 등을 포함한 상세 보고서 생성

1차 TSR Pilot 구성

삼우이머션 1차 TSR Pilot은 평가자(교수)용 웹 기반 중앙 관리 서버와 체험자(예비교사)용 VR 통합 클라이언트로 구성되어 있습니다.


01. VR 접속 및 로그인 체험자가 HMD를 착용하고 콘텐츠 실행 후, 교수자에게 부여받은 학번으로 로그인	02. 교실 진입 및 설정 확인 가상 교실에 진입하여 수업 자료(PDF) 및 교탁 버튼 확인	03.수업 진행 (녹음) '녹음 시작' 버튼을 눌러 수업 시연 내용을 HMD 마이크를 통해 녹음

04. AI 학생 질문 수업 내용이 분석되면 AI 학생이 손을 들고 질문을 생성	05. 질문 답변 및 평가 '녹음 시작' 버튼을 눌러 AI 학생의 질문에 답변. AI가 답변을 평가	06. 수업 종료 및 리포트 생성 '세션 종료' 버튼을 누르면, AI가 전체 수업 내용과 답변을 기반으로 최종 평가 보고서를 생성하고 콘텐츠가 자동 종료

Samwoo Immersion 1차 TSR Pilot 특화기술

AI 기반 실시간 상호작용 및 평가 자동화

1. AI 파이프라인 연동
Python 기반 로컬 AI 파이프라인이 Unreal Engine과 중앙 서버를 연동하여 AI 질문 생성 및 평가를 수행

2. 데이터 중앙 관리
교수자 PC의 중앙 관리 서버가 수업 생성, 학생 관리, 실시간 모니터링, 최종 보고서 수집을 통합 관리

3. 교수자 커스터마이징
교수자가 직접 PDF 교안을 업로드하고 AI의 질문 유형과 평가 기준을 사전에 설정

주요 기능

AI 학생과의 양방향 상호작용, 교수자의 실시간 관리, AI 자동 평가 리포트 기능을 제공하여 예비교사의 실전 역량을 강화합니다.

AI 학생 질문 생성	교수자 웹 대시보드	AI 자동 평가 리포트

수업 내용을 분석하여 AI가 자동으로 질문을 생성하고, 체험자와 양방향 상호작용 진행	웹을 통해 예비교사 등록, 수업 생성(PDF 업로드), 세션 관리, AI 평가 기준 설정	수업 종료 시 체험자의 총점, 종합 평가, 강점, 개선 영역, 상호작용 내역이 포함된 상세 보고서 자동 생성 및 교수자에게 전송