AI 답안 블라인드 테스트, 충격적인 결과! 공정한 평가의 미래는?

AI 시대, 시험의 공정성을 묻다

최근 대학가에서 AI를 사용해 시험을 본 학생들이 잇따라 적발되면서 부정행위 논란이 일었습니다. AI가 일상이 된 지금, 기존 시험 방식으로 공정한 평가가 가능한지 의문이 커지고 있습니다. 이에 제작진은 대학생들과 함께 작은 실험을 진행했습니다. 10명을 두 그룹으로 나누어 7명은 AI 도움을 받고, 나머지 3명은 홀로 문제를 풀게 했습니다. 이 사실을 모르는 교수에게는 블라인드 채점을 맡겨 답안지만 보고 AI로 쓴 답안을 가려낼 수 있을지 지켜봤습니다. 교수는 과연 AI와 인간이 작성한 답안을 구별해 낼 수 있을까요? AI로 작성한 글에 불이익을 줄 수 있을까요? 평가 점수는 AI 그룹과 인간 그룹 중 어느 쪽이 높을까요?

 

 

 

 

블라인드 테스트, AI 답안의 숨겨진 능력

제작진은 대학생들과 함께 작은 실험을 진행했습니다. 10명을 두 그룹으로 나누어 7명은 AI 도움을 받고, 나머지 3명은 홀로 문제를 풀게 했습니다. 이 사실을 모르는 교수에게는 블라인드 채점을 맡겨 답안지만 보고 AI로 쓴 답안을 가려낼 수 있을지 지켜봤습니다. 교수는 과연 AI와 인간이 작성한 답안을 구별해 낼 수 있을까? AI로 작성한 글에 불이익을 줄 수 있을까? 평가 점수는 AI 그룹과 인간 그룹 중 어느 쪽이 높을까?

 

 

 

 

AI 탐지기, 창과 방패의 싸움

시험은 물론 과제물에서 AI 사용이 빈발하다 보니 일부 대학은 AI 탐지기까지 도입했습니다. 학생들은 탐지기를 피하는 우회법을 공유하며 창과 방패의 싸움이 반복되고 있습니다. 제작진이 만난 한 대학생은 AI로 과제를 작성하고, 표절률을 낮추는 과정을 보여줬습니다. 학생은 탐지기에서 표절이 의심된다는 문장이 뜨면 자기 문체로 바꾸고, 자기 생각을 덧붙여 표절률을 크게 낮췄습니다.

 

 

 

 

AI 탐지기의 한계와 현실

제작진은 실제 대학가에서 널리 쓰인다는 AI 탐지기 회사를 찾아가, 작동 원리를 물었습니다. 업체는 문체 특성을 분석해 AI 사용 여부를 판별하고 있지만, 사람이 수정 보완하면 AI 사용을 탐지하기 어렵다고 설명했습니다. 교수들 역시 AI 탐지기는 참고용일 뿐, 최종 판단 도구로 쓰기에는 아직 한계가 있다고 지적합니다.

 

 

 

 

AI 시대, 새로운 평가 방식의 필요성

감독 시스템은 강화해야겠지만, AI시대에는 AI를 활용한 평가와 AI를 배제한 평가, 두 갈래 방식이 동시에 필요하다고 말합니다. AI 시대, 교육 현장에도 변화가 시작됐습니다. 서울 강남의 한 논술학원은 학생들 숙제가 너무 비슷해지는 현상을 보면서 자체 독후감 대회를 폐지했습니다. 또한 학생 수준에 맞는 자체 AI 평가 시스템을 개발하고, AI가 보조로 첨삭도 합니다.

 

 

 

 

AI 시대, 공정한 평가의 미래

공교육도 AI 시대에 맞는 평가 방식을 준비하고 있습니다. 서울시교육청은 학생이 작성한 답안을 AI가 분석, 채점하고, 피드백도 제공하는 시스템을 개발하고 있습니다. 채점의 공정성과 일관성을 높일 수 있다고 기대합니다. 2027년부터 도입될 예정인데, AI 시대 교육과 평가는 달라질 것인가?

 

 

 

 

AI 시대, 교육 평가의 새로운 패러다임

AI 기술의 발전과 함께 교육 현장에서도 공정한 평가에 대한 고민이 깊어지고 있습니다. 블라인드 테스트, AI 탐지기의 한계, 그리고 새로운 평가 방식의 도입을 통해 AI 시대에 맞는 교육 평가 시스템을 구축하려는 노력이 진행되고 있습니다. AI를 활용한 평가와 AI를 배제한 평가, 두 가지 방식을 병행하여 공정성을 확보하고, 학생들의 창의성과 역량을 더욱 잘 평가할 수 있는 시스템을 만들어나가야 할 것입니다.

 

 

 

 

AI 시대, 교육 평가에 대한 궁금증 Q&A

Q.AI가 작성한 답안은 어떻게 평가되나요?

A.블라인드 테스트를 통해 AI 답안과 인간 답안을 비교 평가하고, AI 탐지기의 한계와 보완점을 살펴봅니다. 또한, AI를 활용한 평가 시스템과 AI를 배제한 평가 방식을 병행하는 방안을 모색합니다.

 

Q.AI 탐지기는 얼마나 정확한가요?

A.AI 탐지기는 문체 특성을 분석하여 AI 사용 여부를 판별하지만, 사람이 수정 보완하면 탐지하기 어렵습니다. 따라서 AI 탐지기는 참고용으로 활용되며, 최종 판단 도구로 사용하기에는 한계가 있습니다.

 

Q.AI 시대, 교육 평가는 어떻게 변화할까요?

A.AI를 활용한 평가 시스템 도입, AI가 보조하는 첨삭, 그리고 AI를 배제한 평가 방식의 병행을 통해 교육 평가의 공정성과 효율성을 높이는 방향으로 변화할 것입니다. 2027년부터 서울시교육청에서 AI 기반 평가 시스템이 도입될 예정입니다.