Бот ChatGPT сдает экзамен в юридическую школу США

Чатбот, работающий на массивах данных из Интернета, успешно сдал экзамены в юридической школе США, написав эссе на темы от конституционного права до налогообложения и деликтов.

ChatGPT от OpenAI, американской компании, получившей на этой неделе крупное денежное вливание от Microsoft, использует искусственный интеллект (ИИ) для создания потоков текста на основе простых подсказок.

Результаты оказались настолько хорошими, что преподаватели предупредили, что это может привести к повсеместному списыванию и даже означать конец традиционных методов обучения в классе.

Джонатан Чой, профессор юридического факультета университета Миннесоты, дал ChatGPT тот же тест, с которым сталкиваются студенты, состоящий из 95 вопросов с несколькими вариантами ответов и 12 вопросов с эссе.

В опубликованном в понедельник документе под названием «ChatGPT идет в юридическую школу» он и его соавторы сообщили, что бот набрал в целом C+.

Хотя этого было достаточно для зачета, по большинству предметов бот оказался в самом низу класса, а на вопросах с несколькими вариантами ответов, связанных с математикой, «бомбанул».
Не лучший ученик

«При написании эссе ChatGPT продемонстрировал хорошее знание основных правовых норм и неизменно хорошую организацию и композицию», — пишут авторы.

Однако бот «часто не мог определить проблемы, когда ему давали открытую подсказку, что является основным навыком на экзаменах в юридических вузах».

Власти Нью-Йорка и других юрисдикций запретили использование ChatGPT в школах, но Чой считает, что он может стать ценным помощником в обучении.

«В целом, ChatGPT не очень-то помог студентам-юристам действовать в одиночку», — написал он в Twitter.

«Но мы ожидаем, что в сотрудничестве с людьми языковые модели, подобные ChatGPT, будут очень полезны для студентов-юристов, сдающих экзамены, и для практикующих юристов».

Преуменьшая возможность жульничества, он написал в ответ другому пользователю Твиттера, что двое из трех проверяющих заметили написанную ботом работу.

«(У них) было предчувствие, и их предчувствие оказалось верным, потому что ChatGPT имел идеальную грамматику и был несколько повторяющимся», — написал Чой.