Stanfordo, Prinstono mokslininkai paleidžia MedOS AI-XR-cobot klinikinę sistemą

Kūrėjai randa būdų, kaip derinti dirbtinį intelektą, papildytą ir virtualią realybę bei robotiką naudingoms programoms. Stenfordas-Princetonas AI Coscientist Team šiandien paleido MedOS, kuri, jos teigimu, yra „pirma AI–XR– Cobot sistema, sukurta aktyviai padėti gydytojams tikroje klinikinėje aplinkoje.

Remiantis naujausiais tyrimais, daugiau nei 60% gydytojų JAV pranešė apie perdegimo simptomus. Stanfordo ir Prinstono mokslininkai teigė, kad jie sukūrė MedOS, kad sumažintų perdegimą ne pakeisdami gydytojus, o sumažindami pažinimo perkrovą, gaudydami klaidas ir padidindami tikslumą pasitelkdami pažangią automatizavimą ir robotų pagalbą.

“Tikslas nėra pakeisti gydytojų, o sustiprinti jų intelektą, išplėsti jų gebėjimus ir sumažinti nuovargio, nepriežiūros ar sudėtingumo keliamą riziką”, – teigė dr. Le Cong, vienas iš tarpdisciplininio projekto vadovų ir Stanfordo universiteto docentas. „MedOS nėra tik asistentas, tai naujos eros pradžia AI kaip tikras klinikinis partneris.

MedOS apima grįžtamojo ryšio kilpą

“Medicina istoriškai atskiria abstrakčius klinikinius samprotavimus nuo fizinio įsikišimo, sako tyrėjai. “Mes sujungiame šią takoskyrą su MedOS, bendros paskirties įkūnytu pasaulio modeliu. Imituodamas žmogaus pažinimą per dviejų sistemų architektūrą, MedOS demonstruoja puikų biomedicinos etalonų samprotavimą ir savarankiškai atlieka sudėtingus klinikinius tyrimus.

„MedOS“ sujungia išmaniuosius akinius, robotines rankas ir kelis agentus AI sudaryti realaus laiko antrąjį pilotą gydytojams ir slaugytojams, sakė Stanfordas-Princetonas AI Sąmonininkų komanda. Jos misija – sumažinti medicininių klaidų skaičių, paspartinti tikslią priežiūrą ir remti pernelyg apkrautus gydytojus.

Mokslininkai, remdamiesi ilgamete LabOS patirtimi, siekė sujungti skaitmeninę diagnostiką su fiziniais veiksmais MedOS. Jie sakė, kad sistema gali suvokti pasaulį 3D formatu; priežastis pagal medicininius scenarijus; ir veikti kartu su gydytojais, slaugytojais ir priežiūros komandomis.

MedOS taip pat pristato „pasaulio medicinos modelį“, kuris apima suvokimą, įsikišimą ir modeliavimą nuolatinėje grįžtamojo ryšio kilpoje. Naudodamas išmaniuosius akinius ir robotines rankas, jis gali suprasti sudėtingas scenas, planuoti procedūras ir jas atlikti glaudžiai bendradarbiaudamas su gydytojais.

„Duomenų sluoksnis leidžia mums sukurti pasaulio modelį naudojant erdvinį intelektą, kad robotai galėtų dirbti su žmonėmis šiandien, o ne laukti visiškai humanoidinių robotų“, – sakė dr. Congas. Roboto ataskaita. “Šiuo metu ligoninėse yra labai mažai robotų, išskyrus (Intuityviosios chirurgijos) da Vinci. Mes norime įtraukti robotus į kiekvieną medicinos dalį.”

Platforma buvo išbandyta atliekant chirurginius modeliavimus, ligoninės darbo eigą ir tiesioginę tikslią diagnostiką. Tyrėjai teigė, kad anksti pasiteisino tokiose užduotyse kaip laparoskopinė pagalba, anatominis žemėlapių sudarymas ir gydymo planavimas.

Scheminė MedOS architektūros, jungiančios skaitmeninį ir fizinį pasaulį, apžvalga. (Spustelėkite čia, norėdami padidinti.) Kreditas: Mengdi Wang, Le Cong ir kt.

Stanfordas-Prinsetonas AI Coscientist Team kuria modulinę sistemą

Tyrėjai teigė, kad MedOS sukūrė modulinę ir pritaikomą klinikinėje aplinkoje ir specialybėse. Chirurginio modeliavimo metu jis parodė gebėjimą interpretuoti realaus laiko vaizdą iš išmaniųjų akinių, nustatyti anatomines struktūras ir padėti suderinti robotų įrankius.

Komanda sukūrė savo lytėjimo jutiklius, kad galėtų dirbti su ribotos jėgos ir galios roboto rankomis, sakė Cong. Jis veikia su išmaniaisiais akiniais ir fotoaparatais, kad rinktų treniruočių duomenis, o tai papildo viešai prieinamas duomenų bazes.

„MedOS“ integruoja suvokimą, planavimą ir veiksmą, veikdama kaip klinikinis antrasis pilotas ir aktyvus bendradarbis atliekant labai svarbias procedūras, sakė Stanfordas-Princetonas. AI Sąmonininkų komanda. Jo galimybės apima:

• Multi-agentas AI architektūra, kuri atspindi klinikinio mąstymo logiką, sintezuoja įrodymus ir valdo procedūras realiuoju laiku
• MedSuperVision, atvirojo kodo medicininių vaizdo įrašų duomenų rinkinys, kuriame yra daugiau nei 85 000 valandų chirurginių filmuotų procedūrų metu.
• Įrodyta sėkmė padedant slaugytojams ir medicinos studentams pasiekti gydytojo lygio darbą ir sumažinti žmogiškąsias klaidas nuovargio aplinkoje
• Atvejų tyrimai, įskaitant naujų atsparumo imunoterapijai būdų atskleidimą integruojant didelės kohortos duomenis

„Pirmiausia turime sukurti pasaulio modelį“, – sakė Congas. „Pateikus žvalgybos informaciją iš gydytojų, gydytojų ir slaugytojų, mūsų dirbtinio intelekto smegenys galėtų būti pagrindas kada nors įdiegti visiškai savarankiškus humanoidus.

Tuo tarpu ji atlieka pradinį diegimą ligoninių logistikoje ir laboratorijose. Logistikos tikslais MedOS gali padėti greitai įdiegti robotus kraujo mėginiams ir atsargoms perkelti.

Laboratorijos yra gera vieta pradėti, nes jos nėra skirtos pacientams, todėl lengviau užtikrinti, kad bandymai ir diagnostika būtų greitesni ir be klaidų, paaiškino Cong.

Ankstyvieji pilotai veda į GTC pristatymą

MedOS paleidžiama su NVIDIA, AI4Science, Nebius ir VITURE palaikymu. Jis buvo dislokuotas ankstyvuosiuose pilotuose Stanforde, Prinstone ir Vašingtono universitete. Klinikiniai bendradarbiai dabar gali prašyti išankstinės prieigos.

„Mes tik pradedame dirbti su gydytojais, bandydami chirurgines procedūras ant netikro kūno“, – sakė Congas. “Norime įsitikinti, kad pacientams skirtas programas jau išbandėme su skirtingų lygių gydytojais ir modeliavimu, prieš pereidami prie faktinių klinikinių nustatymų. MedOS jau pasirodė esąs tvirtas ir geresnis nei Gemini atliekant erdvinius tyrimus. Gali būti labai lankstus chirurginiam automatizavimui.”

„MedOS“ bus demonstruojama kovo pradžioje Stanfordo rengiamame renginyje, o po to viešai pristatys NVIDIA GPU technologijų konferenciją (GTC). Žiniasklaida, gydytojai ir tyrimų institucijos, besidomintys ankstyvomis demonstracijomis ar interviu, gali susisiekti su MedOS komanda dėl koordinavimo.

Stenfordas-Princetonas AI „Coscientist“ komanda yra skirta bendrai kurti realiu laiku AI sistemos, sukurtos dirbti kartu su žmonių mokslininkais ir gydytojais. Jame teigiama, kad LabOS ir MedOS yra diegiamos pirmaujančiuose universitetuose ir ligoninėse, siekiant paspartinti atradimus, sumažinti žmogiškąsias klaidas ir pagerinti mokslinius bei klinikinius rezultatus.

„Mes palaikome ryšį su ligoninių sistemomis šiaurės vakaruose ir netrukus rytinėje pakrantėje“, – sakė Cong. “Siunčiame duomenų rinkimo įrankius kitoms institucijoms partneriams ir kitai versijai, kuri naudos didžiulius etaloninių duomenų kiekius. Tai nuolatinė pažanga, todėl MedOS domisi kelios institucijos.”