2023-01-27 06:52:11
ChatGPT прошел тесты, необходимые для получения медицинских лицензий и бизнес-степеней
ChatGPT, вирусный чат-бот, вызвал озабоченность преподавателей и ученых своей способностью
списывать на сочинениях и экзаменах. Теперь он сдал выпускной экзамен
Уортонского университета MBA, экзамен на получение медицинской лицензии США и
экзамен на адвоката.
Профессор использовал GPT-3 от OpenAI для сдачи выпускного экзамена по MBA. GPT-3 получил бы на экзамене
от B до B-.
Профессор, Кристиан Тервиш, обнаружил, что GPT-3 лучше всего справляется
"с основными вопросами по управлению операциями и анализу процессов".
Чатбот давал как правильные ответы, так и отличные объяснения.
Временами бот допускал ошибки в простых математических расчетах и не мог справиться с более сложными вопросами анализа процессов.
Академики теперь обсуждают экзаменационную политику и то, что значит использовать ChatGPT в качестве ресурса, а не замены определенных навыков.
Исследователи также протестировали ChatGPT на медицинском экзамене США (USMLE), который состоит из трех частей и требуется для получения
медицинской лицензии в США всеми выпускниками медицинских школ.
ChatGPT показал результаты,
близкие или соответствующие порогу сдачи трех экзаменов, и продемонстрировал высокий уровень последовательности в своих объяснениях.
Большие языковые модели, подобные ChatGPT, потенциально могут помочь в медицинском образовании и принятии решений.
В статье говорится, что врачи виртуальной клиники под названием Ansible Health уже начали экспериментировать с ChatGPT для помощи в решении письменных задач, таких как
составление апелляционных писем и упрощение сложных медицинских отчетов, чтобы помочь пациентам лучше понять свои заболевания.
ChatGPT показал неплохой результат при сдаче экзамена на получение степени бакалавра
(Multistate Bar Examination, MBE).
Это экзамен, который выпускники юридических вузов должны сдать, чтобы официально заниматься юридической практикой, и состоит он из трех частей, MBE - первая.
Результат GPT-3.5 в
50% превышает базовый показатель угадывания в 25%, который представляет собой вероятность правильного ответа при случайном выборе из четырех вариантов с множественным выбором.
Алекс Табаррок (университет Дж. Мейсона) протестировал GPT на экзамене по праву и экономике. ИИ получил
"незначительный проходной балл".
Поскольку большие языковые модели, такие как ChatGPT и Claude AI, превосходят ряд людей в способности сдавать экзамены высокого уровня без многолетнего обучения и получения степени, они начинают дестабилизировать измерения, которые мы используем для определения академического успеха.
262 views03:52
P
