Microsoft MI diagnostikas sistēma žurnāla Science pētījumā precīzāka par vispārējā profila ārstiem

Microsoft pētnieki 22. oktobrī zinātniskajā žurnālā Science publicēja pētījumu par MI sistēmu MAI-DxO, kas pakāpeniski noskaidro pacienta diagnozi. Kontrolētā testā ar sarežģītiem gadījumiem no žurnāla The New England Journal of Medicine (NEJM) sistēma pareizi noteica diagnozi 83,2 % gadījumu, bet vispārējā profila ārsti, kuri drīkstēja izmantot uzziņu avotus un meklēšanu, – 36,1 % gadījumu. Bez šiem rīkiem ārstu precizitāte bija 22,3 %.

Sistēma nav viens modelis, bet gan koordinators, kas atdarina virtuālu ārstu konsīliju. Tā sāk ar īsu pacienta stāvokļa aprakstu, uzdod jautājumus, pasūta izmeklējumus, apspriež iespējamās diagnozes un pēc katras jaunas informācijas pārskata savu vērtējumu. Pie katra izmeklējuma tā arī izvērtē, vai tā paredzamais ieguvums attaisno izmaksas. Galvenajos rezultātos sistēma darbojās ar OpenAI modeli GPT-5.

Lai to pārbaudītu, pētnieki izveidoja testu SDBench, kurā ir 304 NEJM klīniskie gadījumi un 325 uzņemšanas gadījumi no neatliekamās palīdzības nodaļas datubāzes MIMIC-IV-ED. Atsevišķs MI modelis informāciju par gadījumu atklāja tikai tad, ja tā tika konkrēti pieprasīta. Tiešajā salīdzinājumā ar ārstiem izmantoja 56 NEJM gadījumus, kas sistēmas izstrādes laikā netika lietoti.

Arī tipiskākos neatliekamās palīdzības gadījumos MAI-DxO bija precīzāka: tā sasniedza 80,3 % pareizu diagnožu, bet ārsti – 46,8 %. Pētījumā arī parādīts, ka sistēmu var iestatīt taupīgāk, lai tā pasūtītu lētākus izmeklējumus, un tad precizitāte samazinās tikai nedaudz.

Autori paši norāda uz būtiskiem ierobežojumiem. Sistēma tika salīdzināta ar atsevišķiem vispārējā profila ārstiem, nevis ar speciālistiem vai ārstu komandām, un tests bija tikai teksta formātā, bez attēldiagnostikas un citiem vizuāliem datiem. Viņi uzsver, ka rezultāti neapliecina pārākumu pār reālu klīnisko praksi. Visi pētījuma autori ir Microsoft darbinieki, un arī pats tests ir uzņēmuma izstrādāts.

Microsoft daļu SDBench, tostarp vērtēšanas kodu, padara publiski pieejamu, lai citi pētnieki varētu rezultātus pārbaudīt. Tomēr klīniskie dati ir pieejami tikai ar atsevišķu licenci vai piekļuves atļauju.

Nākamais solis būs pārbaude ar īstiem pacientiem. Microsoft plāno kopā ar Bostonas slimnīcu Beth Israel Deaconess Medical Center veikt prospektīvu pētījumu, kurā pacienti sazināsies ar sistēmu tieši, bet tās secinājumus salīdzinās ar ārstu neatkarīgiem vērtējumiem.