Готов ли ChatGPT 4 заменить врачей?
Способен ли ChatGPT-4, последнее обновление искусственного интеллекта, разработанное OpenAI, уже заменить врачей? Такой острый вопрос ставится в книге "Революция искусственного интеллекта в медицине".
В книге, написанной в соавторстве гарвардским компьютерщиком и врачом доктором Исааком Коханом при содействии журналиста Кэри Голдберг и Питера Ли, вице-президента по исследованиям Microsoft, рассматривается влияние искусственного интеллекта на медицину.
В рамках своего исследования биомедик протестировал возможности GPT-4, последнего обновления языковой модели GPT, на базе которой работает ChatGPT. Анонсированный в марте, GPT-4 пока доступен только подписчикам платной услуги ChatGPT Plus. Доктор говорит, что для проведения экспериментов ему был предоставлен "ранний доступ" к ИИ.
ChatGPT сдал экзамен на медицинскую лицензию
Чтобы проверить пределы возможностей искусственного интеллекта, Айзек Кохане задал ChatGPT 4 вопроса из экзамена на получение медицинской лицензии США. Эта трехступенчатая программа дает право на медицинскую практику в США. Она проверяет знания по большинству медицинских дисциплин, от биохимии до диагностических заключений. Все медицинские учебные заведения США требуют от своих студентов сдавать этот экзамен во время обучения. Первый экзамен сдается примерно через два года обучения, второй - через четыре года, а третий необходим для того, чтобы стать врачом.
Первым результатом стало то, что GPT-4 смог правильно ответить на 90% вопросов программы. Языковая модель оказалась намного эффективнее, чем GPT-3.5, предыдущая версия ИИ. При тестировании в феврале средний балл ИИ составил 60%, что по-прежнему считается удовлетворительным. В деталях робот набрал от 52,4% до 75%. Обновление GPT-4 значительно улучшило результаты чат-бота. Он даже справляется лучше некоторых врачей, добавляет председатель департамента биомедицинской информатики Гарвардской медицинской школы.
Как объясняет исследователь в своей книге, ChatGPT также выделяется благодаря своим дополнительным функциям. Во время тестирования чат-бот был особенно успешен благодаря своим навыкам перевода. Он смог перевести информацию, предоставленную пациентом, который говорил на португальском языке. ИИ также ответил пациенту четкими и понятными объяснениями. Разговорный робот способен помочь врачам общаться с пациентами, избегая, например, технического жаргона.
ChatGPT может сымитировать врачей
Однако ChatGPT 4, как и его предшественники, не способен понимать медицинскую информацию и концепции. Он просто генерирует ответы на основе имеющихся данных. По мнению автора книги "Революция ИИ в медицине", чат-бот может имитировать то, как врачи успешно ставят диагноз.
Чтобы прийти к такому выводу, доктор Исаак Кохане предоставил генеративному искусственному интеллекту несколько случаев, в том числе случай с ребенком, с которым он познакомился несколькими годами ранее. На основе нескольких фрагментов информации, таких как УЗИ и уровень гормонов, чат-бот поставил диагноз врожденной гиперплазии надпочечников - редкого эндокринного заболевания. Автор книги пришел к такому же выводу, взяв этот случай.
К сожалению, ChatGPT все еще далек от надежности. В экспериментах Кохане ChatGPT допустил множество вычислительных ошибок или приближений, последствия которых, очевидно, могут быть катастрофическими. Как и все генеративные ИИ, чат-бот иногда может сказать что угодно. Иногда ChatGPT "галлюцинирует", то есть придумывает ответы, если ему не хватает данных. GPT-4 не застрахован от этого, хотя OpenAI утверждает, что в этой модели риск галлюцинаций снижен.
На данном этапе не стоит принимать все, что говорит ИИ, за чистую монету. Если вы задаете чат-боту вопросы, связанные со здоровьем, вам рекомендуется подтвердить достоверность всех ответов у своего врача. В своей книге доктор Исаак Кохане рекомендует проверять то, что говорит GPT-4, с помощью... GPT-4. Начав новый разговор, лингвистическая модель оценит свои рассуждения свежим взглядом и заметит любые ошибки.
"Практически в любом виде, от диагностики до медицинских карт и клинических испытаний, влияние будет настолько широким и глубоким, что мы считаем, что уже сейчас нужно начинать бороться за его оптимизацию", — говорится в книге.
При соблюдении осторожности ChatGPT может служить помощником для врачей, заключает доктор Исаак Кохане. В книге он представляет, как медицинские работники могли бы использовать разговорный агент для определения того, от чего страдает пациент. В руках врача, будь то эксперт или начинающий ординатор, ChatGPT - бесценный инструмент... при условии, что врач сохраняет критический взгляд.