Большие языковые модели бросают вызов будущему высшего образования

Jan 15, 2024

Nature Machine Intelligence, том 5, страницы 333–334 (2023 г.) Процитировать эту статью

5221 Доступов

1 Цитаты

20 Альтметрика

Подробности о метриках

ChatGPT — это чат-бот, основанный на большой языковой модели (LLM), который генерирует текст в формате диалога. Он был публично выпущен OpenAI в декабре 2022 года и вызвал шок в секторе высшего образования благодаря своей способности создавать отточенный, уверенно звучащий текст, который можно использовать для написания эссе и заданий. Хотя на данный момент он может давать ответы1, которые достаточно компетентны только для получения проходного балла, он способен правильно отвечать на вопросы с несколькими вариантами ответов в нескольких предметных областях, включая сдачу образцовых вопросов на важных экзаменах по лицензированию. Скорость развития таких приложений была такова, что нетрудно представить, что вскоре будет выпущен значительно улучшенный преемник ChatGPT.

Возникает вопрос: должно ли высшее образование реагировать и каким образом? Должны ли университеты запретить его использование? Или вместо этого ученым следует признать, что языковые модели станут неотъемлемой частью их профессионального инструментария, и включить их в нашу практику преподавания и оценки?

На практическом уровне разрешение использования инструментов на основе LLM повлияет на структуру оценки. А что касается профессионального поведения, многие разделяют мнение, что использование текста, созданного LLM, приравнивается к плагиату. Поскольку в университетах уже установлены суровые наказания за плагиат другими способами, кажется естественным распространить их и на степень магистра права. Проблема с этим подходом, однако, заключается в том, что его будет сложно обеспечить. В отличие от копирования и вставки или перефразирования, LLM создают новый текст, который нельзя проследить до одного источника, и хотя было выпущено программное обеспечение для проверки вероятности мошенничества с помощью LLM (ссылка 2), их надежность оказывается низкой для сейчас. Более того, любая попытка обновить программное обеспечение для обнаружения, скорее всего, потерпит неудачу3 в условиях быстро развивающегося LLM.

Другая реакция некоторых университетов заключалась в том, чтобы (по крайней мере временно) вернуться к старомодным бумажным экзаменам под наблюдением в качестве основного способа оценки. Хотя это решение значительно сократит мошенничество, связанное с LLM, в краткосрочной перспективе, оно вряд ли будет устойчивым или широко применимым. Этот подход можно использовать только в традиционных учебных заведениях, где студенты физически присутствуют, и это регрессивный шаг по отношению к цифровым преобразованиям в сфере предоставления и оценки высшего образования4, которые были спровоцированы глобальной пандемией COVID-19. Преобразование письменного оценивания в устные экзамены, возможно, лучше подходит для цифровой среды, однако при этом возникают проблемы с надежностью, достоверностью и масштабируемостью.

Третий тип реакции на программы LLM, и, возможно, единственный устойчивый, заключается в их адаптации и принятии, как это предусмотрено в недавней редакционной статье5 в этом журнале и в соответствии с недавним заявлением Международного бакалавриата относительно их квалификации6. ChatGPT предоставляет множество возможностей экспериментировать и проявлять творческий подход при обучении и оценке учащихся. Однако принятие ChatGPT (или аналогичных частных приложений) в качестве части стандартной практики сопряжено с серьезными рисками негативных операционных, финансовых, педагогических и этических последствий для университетов. В частности, OpenAI не обязана удовлетворять потребности образовательных учреждений, когда дело доходит до обслуживания и доступа к ее модели, создавая тем самым основные эксплуатационные проблемы, если это является частью оценки.

Долгосрочные педагогические последствия принятия LLM в качестве инструмента обучения также требуют рассмотрения. Практика академического письма – распространенный способ обучения и оценки логической аргументации и критического мышления7 (которые, по иронии судьбы, являются необходимыми навыками для оценки результатов магистратуры). Студенты, говорящие на иностранном языке, или студенты, находящиеся в неблагоприятном образовательном положении, вероятно, пострадают больше всего, при этом преподаватели уделяют меньше внимания обучению написанию хорошо написанных и аргументированных текстов. Это может привести к усилению социального неравенства и снижению социальной мобильности после того, как студенты закончат обучение и попадут в рабочую среду, где степень магистра права может быть недоступна или бесполезна.