GPT-4 сдал экзамены на адвокатскую практику в США
ChatGPT продолжает сдавать экзамены. По новому исследованию, ChatGPT на базе GPT-4 сдал экзамен в адвокатуру для занятия юридической практикой в США. ИИ набрал 297 баллов на экзамене. Эксперимент провели два профессора права и два сотрудника юридической технологической компании Casetext.
Экзамен на адвокатуру включает в себя оценку знаний по праву с помощью эссе и тестов, имитирующие работу юриста. Один из исследователей профессор юридического колледжа Чикаго‑Кент Дэниел Мартин Кац, заявил, что GPT-4 выдавал в основном актуальные и правильные ответы на тест, а также написала эссе. Исследователи сомневались, сможет ли ИИ написать эссе на юридическую тему. В итоге ИИ справился с этой задачей.
ChatGPT уже справлялся с другими стандартизированными тестами, например, Scholastic Aptitude Test или Scholastic Assessment Test (стандартизованный тест для приёма в высшие учебные заведения в США) и Graduate Record Examination (экзамен, требующийся для поступления на постдипломную программу в США). Однако исследователей, проводивших эксперимент, удивила именно сдача экзамена на адвокатуру GPT-4. Да и понятно почему, у компании Casetext есть помощник CoCounsel. Он представляет собой помощника на основе GPT-4. И компания помимо других услуг, предоставляет услуги по проверке юридических документов через этого ИИ-помощника.
Помимо университетских экзаменов, ChatGPT успешно сдал экзамен по медицинскому лицензированию в США. Нейросеть показала высокий результат прохождения тестирования, а исследователи заявили, что при должном обучении ChatGPT может сдать экзамен и получить медицинскую лицензию в США.
Но не только студентам и будущим специалистам помогает ChatCPT. Так группа учащихся из школы Cape Coral High School во Флориде использовала ChatGPT, чтобы не тратить время на домашние задания. Их вычислили преподаватели, так как в новых работах стиль письма учеников, особенно в эссе, значительно отличался от ранее сданных заданий.
Однако и ChatCPT может не сдать экзамены. В Сингапуре он провалил экзамены за 6 класс общеобразовательной школы, выдав 16% правильных ответов по математике и 21% — по естественным наукам. Оценка теста по английскому языку — 11 баллов из 20. Специалисты пытаются найти объяснения провала, называя среди причин некорректно задаваемые вопросы по отдельным предметам, и даже «скуку» и «троллинг» ИИ из-за простых вопросов.
