Наскоро проведено изследване открива, че чатботът за изкуствен интелект ChatGPT, задвижван от модела за естествен език GPT-3.5, е изключително неточен в диагностицирането на педиатрични случаи. Изследователите разглеждат 100 педиатрични случая и откриват, че ChatGPT греши в 83% от тях. Това изследване, публикувано в списанието JAMA Pediatrics, е първото от своего рода, което оценява способността на ChatGPT за диагностициране на педиатрични случаи.
В предишно изследване GPT-4, по-нов модел за естествен език, поставя правилна диагноза само в 39% от предизвикателните медицински случаи, включително тези, свързани както с възрастни, така и с деца. Това показва, че има още дълъг път за изминаване в разработването на точни чатботи с изкуствен интелект за медицински диагнози.
По време на изследването изследователите поискаха от ChatGPT да предостави различна диагноза и окончателна диагноза за всеки случай. Въпреки това, ChatGPT постави неправилна диагноза при 72 от 100-те случая. В някои случаи отговорите на чатбота бяха свързани с клинична практика, но се смятаха за прекалено общи, за да бъдат считани за правилна диагноза.
В един от случаите, подчертани в изследването, тийнейджър с аутизъм проявява симптоми на обрив и скованост на ставите. Докато първоначалният лекар поставя диагноза на скърбушка, ChatGPT диагностицира тийнейджъра с имунно-тромбоцитопенична пурпура, болест, засягаща свръхръбчния сгъстяване. В друг случай, бебе има оттичане на абсцес отстрани на врата си. Докато първоначалният лекар го приписва на Борхео-оторенален (BOR) синдром, ChatGPT твърди, че бебето има гранжиален влакнест кист.
Въпреки това има няколко случая, в които ChatGPT стига до същата диагноза като лекарите. Например в случай с 15-годишно момиче с идиопатична вътремозъбнична хипертензия (IIH), ChatGPT правилно отговаря на първоначалната диагноза на врача за Болестта на Адисън.
Изследователите признават, че големите модели на естествен език като ChatGPT все още имат стойност като административен инструмент за лекарите, например за взимане на бележки. Въпреки това, изследването подчертава ограниченията на чатботите с изкуствен интелект при поставянето на точни диагнози, особено в разпознаването на връзките между медицинските заболявания.
Освен това изследователите подчертават необходимостта от по-избирателно обучение и подобрен достъп до реално време на медицинска информация, за да се подобри точността на диагнозата на AI чатботите в бъдеще.
Заключително, въпреки че AI чатботите имат потенциал в здравния сектор, са необходими допълнителни изследвания и развитие, за да се гарантира тяхната надеждност и точност при поставянето на педиатрични диагнози.
The source of the article is from the blog foodnext.nl