Naukowcy z Collegium Medicum Uniwersytetu Mikołaja Kopernika w Bydgoszczy sprawdzili, czy sztuczna inteligencja ma szansę zastąpić lekarzy. Wyniki badania nie pozostawiają wątpliwości.
Zespół studentów pod wodzą dr. Szymona Suwały oraz prof. Romana Junika z Katedry Endokrynologii i Diabetologii Wydziału Lekarskiego Collegium Medicum UMK w Bydgoszczy postanowił sprawdzić, jak Chat GPT poradzi sobie z egzaminiem specjalistycznym z interny.
- Co wielu zaskoczyło, Chat GPT, pomimo iż jest prostym modelem językowym, okazał się zdolny zaliczyć USMLE, czyli amerykański test licencyjny dla lekarzy po polsku. Zdał też europejski egzamin specjalizacyjny z kardiologii - zaznacza dr Szymon Suwała, by za chwilę ostudzić emocje.
Czy poradził sobie zatem z PES z zakresu interny?
- Wraz z moim zespołem sprawdziliśmy skuteczność Chat GPT w pytaniach z 10 sesji Państwowego Egzaminu Specjalizacyjnego z chorób wewnętrznych (z lat 2013-2017) - łącznie było to 1191 pytań. Chat GPT odpowiadał prawidłowo na 47.5-53.3 proc. zadań (przeciętnie 49.4 proc.), co było niewystarczające do zdania egzaminu (próg wynosi 60 proc.) - krótko mówiąc, oblał go w każdej sesji - mówi dr Suwała.