AI 보조원이 교육에 미치는 잠재적 영향을 조사한 EPFL 연구에 따르면 GPT-4와 같은 시스템은 대학 시험 문제의 85%에 올바르게 답할 수 있는 것으로 나타났습니다.
ChatGPT는 2022년 말에 인기가 폭발적으로 증가하여 첫 달에만 1억 명 이상의 사용자를 유치했습니다. 이후 인공 지능은 사회의 여러 측면을 변화시켰습니다. 특히 고등교육을 받는 학생들이 AI를 활용하는 사례가 늘고 있다. 이러한 도구는 교수법과 교육을 개선할 수 있는 기회를 제공하고 학습 결과에 심각한 문제를 제기하지만, 이러한 도구가 학습 평가 방법에 미칠 수 있는 영향은 현재까지 포괄적으로 연구되지 않았습니다.
컴퓨터 및 통신 과학 분야 스위스 École Polytechnique Fédérale de Lausanne의 EPFL 연구원들은 Proceedings of the National Academy of Sciences(PNAS)에 발표된 새 논문에서 50개의 EPFL 과정에 대한 대규모 연구를 수행하고 현재 성과를 측정했다고 언급했습니다. 고등 교육 과정 평가의 대규모 언어 모델. 선택된 과정은 컴퓨터 과학, 수학, 생물학, 화학, 물리학 및 재료 과학을 포함한 광범위한 STEM 분야를 다루는 9개의 학사, 석사 및 온라인 프로그램에서 샘플링되었습니다.
"자연어 처리 연구소(NLP) 소장이자 EPFL AI 센터 회원인 Antoine Bosselut 조교수는 다양한 학위 과정에서 다양한 교재를 얻었고, 학생들이 제공하는 것과 가장 유사한 형식으로 구성되었다고 설명했습니다. AI 모델에 적용한 다음 모델이 생성한 응답을 재평가합니다.
GPT-3.5 및 GPT-4에 초점을 맞춰 연구원들은 8가지 프롬프트 전략을 사용하여 응답을 생성했으며 GPT-4가 평균적으로 질문의 65.8%에 올바르게 답할 수 있었고 전체 질문의 85.1%에 대해서도 정답을 생성할 수 있다는 사실을 발견했습니다. 적어도 하나의 유도 전략.
「我們對這個結果感到非常驚訝，沒有人料到 AI 會在這麼多門課程中取得這麼高的正確答案比例。重要的是，65% 的問題正確答案是使用最基本的無知識提示策略達到的，因此任何人在不瞭解任何技術的情況下，都可以達到這個目標。」論文的共同作者、NPL 科學家 Anna Sotnikova 說，甚至只要有一些科目基本知識，就有可能達到 85% 的成功率，這實在令人震驚。
그런 다음 연구원들은 이러한 AI 시스템을 "사용"하여 취약성을 평가했습니다. 즉, 학생들이 필요한 학업 기술을 배우기 위해 선택하는 일반적인 인지 경로를 우회하는 데 사용할 수 있는지 여부를 평가했습니다.
「我們擔心的是，如果這些模型真如我們所指出的那樣有能力，那麼使用這些模型的學生可能會縮短學習新概念的過程。這可能會讓某些技能的基礎在較早階段就變得較弱，使得日後學習更複雜的概念變得更困難。」助理教授Bosselut 说：「也許這需要討論我們應該先教什麼，才能讓我們所擁有的技術與學生在未來數十年所做的事產生最佳的協同效應。」
AI 비서 개발의 또 다른 핵심 포인트는 더 나빠지는 것이 아니라 더 좋아질 뿐이라는 것입니다.
「人工智能在很多方面對高等教育機構提出了挑戰，例如：未來的畢業生需要哪些新技能，哪些技能正在變得過時，我們如何才能提供規模化的反饋，以及我們如何衡量知識？」EPFL 負責學術事務的副校長 Pierre Dillenbourg 表示：「這些問題幾乎在 EPFL 的每次管理會議中都會出現，而最重要的是我們的團隊所啟動的專案，能夠儘可能為這些問題提供以實證為基礎的答案。」
장기적으로 교육 시스템은 분명히 AI의 존재에 적응해야 합니다.
「… 我覺得現在與 LLM 的一個很好的類比就是計算機，當計算機被引入時，人們也有類似的擔心，擔心孩子們不再學習數學。現在，在教育的早期階段，通常不允許使用計算機，但到了高中及以上的階段，計算機就會出現，在學生學習依賴計算機的進階技能時，計算機也能兼顧較低層次的工作，」NLP 的博士生 Beatriz Borges 補充道。
이 기사는 다음에 의해 처음 게시되었습니다.EPFL. 작가:피터슨이 물었다.
(CC BY-SA 4.0)
댓글