Ne putem baza pe ChatGPT în asistența medicală?

ChatGPT este un model de limbaj de mari dimensiuni care a câștigat popularitate în diverse domenii. Acesta a fost instruit pe o gamă largă de surse, inclusiv articole științifice și cărți. Spre deosebire de modelele anterioare de procesare a limbajului natural (NLP), ChatGPT are capacitatea de a învăța autonom prin „învățare auto-supervizată”. Modelul poate sintetiza rapid o cantitate mare de informații, ceea ce îl face un instrument de referință valoros pentru profesioniștii din domeniul medical. Cu toate acestea, eficacitatea sa în medicină depinde de acuratețea și completitudinea informațiilor furnizate.
Într-un studiu recent apărut în JAMA Network Open, cercetătorii de la Universitatea Vanderbilt au investigat capacitatea modelului de limbaj ChatGPT de a furniza informații medicale atât pacienților, cât și profesioniștilor din domeniul sănătății.

Echipa de cercetare a alcătuit o listă de 284 de întrebări care acoperă 17 specialități medicale, chirurgicale și pediatrice. Întrebările au fost introduse în ChatGPT, iar răspunsurile au fost evaluate de medicii care le-au formulat, utilizând scale Likert pentru acuratețe și completitudine. Rezultatele au fost analizate statistic, iar acuratețea și completitudinea au fost corelate.

Rezultate și concluzii

În ceea ce privește acuratețea, ChatGPT a obținut un scor median de 5 (interval intercuartil: 1-6) pentru primul set de 180 de întrebări multispecialitate, ceea ce indică faptul că răspunsurile au fost în mare parte corecte. Scorul mediu a fost însă mai mic, de 4,4 (abatere standard: 1,7). În ceea ce privește completitudinea, scorul median a fost de 3, în timp ce scorul mediu a fost de 2,4 (abatere standard: 0,7). În total, 36 de răspunsuri au fost clasificate ca fiind inexacte.

Deși ChatGPT a arătat un potențial semnificativ în furnizarea de informații medicale precise și complete, există încă aspecte care necesită îmbunătățire. Unul dintre acestea este incapacitatea modelului de a diferenția între sursele de calitate ridicată și scăzută. Cu toate acestea, performanța sa s-a îmbunătățit semnificativ într-o perioadă scurtă de timp, subliniind importanța actualizărilor continue și a feedback-ului din partea utilizatorilor pentru a spori acuratețea factuală și a valida sursele de informație.

În concluzie, ChatGPT are potențialul de a deveni un instrument valoros pentru practicienii medicali și pacienți, dar mai sunt pași de făcut pentru a ajunge acolo.

sursa: News Medical
foto: CkyBe / Shutterstock