Modelele de limbaj mare reglate cu reglaj mare îmbunătățesc ID-ul de eroare în rapoartele de radiologie

Urmăriți Drugslib pe

Revizuit medical de Carmen Pope, Bpharm. Ultima actualizare la 27 mai 2025.

de Elana Gotkine Healthday Reporter

TUESDAY, May 27, 2025 -- Large language models (LLMs), fine-tuned on radiology reports, enhance error detection in radiology reports, according to a study published online May 20 in Radiology.

Cong Sun, Ph.D., from Weill Cornell Medicine in New York City, and colleagues developed and evaluated generative LLMs for detecting errors in radiology reports pertaining to health care proofreading in Un studiu retrospectiv. Un set de date a fost construit cu două părți: prima a inclus 1.656 de rapoarte de radiologie toracică sintetică generate de GPT-4 (OpenAI) cu 828 rapoarte sintetice fără erori și 828 de erori care conțin. Un total de 614 rapoarte au fost incluse în a doua parte: 307 fără erori din baza de date MIMIC Chest Radiograph (MIMIC-CXR) și 307 rapoarte sintetice cu erori generate de GPT-4. Folosind strategii de solicitare zero, provenții cu câteva fotografii sau strategii de reglare fină, mai multe modele au fost rafinate, iar performanța acestor modele a fost evaluată.

Cercetătorii au descoperit că modelul de instrucțiune LLAMA-3-70B-reglat fin a obținut cele mai bune performanțe folosind o solicitare zero, cu scoruri F1 de 0,769, 0,772, 0,750, 0,828 și 0,780 pentru erori de negație, erori de stânga/dreapta, erori de schimbare a intervalului, erori de transcripție și, în general,. Doi radiologi au revizuit 200 de rapoarte selectate aleatoriu, producție de model într-o fază de evaluare a lumii reale; 99 au fost confirmate de ambii radiologi să conțină erori detectate de modele și 163 au fost confirmate de cel puțin un radiolog.

"Rezultatele arată că reglarea fină este crucială pentru a permite implementarea locală a LLM-urilor, în timp ce demonstrează de asemenea importanța proiectării prompte în optimizarea performanței pentru sarcini medicale specifice", scriu autorii.

un autor are brevete planificate, emise sau în așteptare cu Spitalul Weill Cornell.

abstract/text complet

editorial (abonamentul sau plata poate fi necesar)

Discuer: Statistical Data-uri în domeniul medicalului, care oferă texte generale și nu este de acord: Statistical Data-uri în domeniul medicalului, și nu este vorba de not. indivizi. Factorii individuali pot varia foarte mult. Căutați întotdeauna sfaturi medicale personalizate pentru deciziile individuale de asistență medicală.

Sursa: Healthday

Postat : 2025-05-28 06:00

Citeşte mai mult

Declinare de responsabilitate

S-au depus toate eforturile pentru a se asigura că informațiile furnizate de Drugslib.com sunt exacte, actualizate -data și completă, dar nu se face nicio garanție în acest sens. Informațiile despre medicamente conținute aici pot fi sensibile la timp. Informațiile Drugslib.com au fost compilate pentru a fi utilizate de către practicienii din domeniul sănătății și consumatorii din Statele Unite și, prin urmare, Drugslib.com nu garantează că utilizările în afara Statelor Unite sunt adecvate, cu excepția cazului în care se indică altfel. Informațiile despre medicamente de la Drugslib.com nu susțin medicamente, nu diagnostichează pacienții și nu recomandă terapie. Informațiile despre medicamente de la Drugslib.com sunt o resursă informațională concepută pentru a ajuta practicienii autorizați din domeniul sănătății în îngrijirea pacienților lor și/sau pentru a servi consumatorilor care văd acest serviciu ca un supliment și nu un substitut pentru expertiza, abilitățile, cunoștințele și raționamentul asistenței medicale. practicieni.

Lipsa unui avertisment pentru un anumit medicament sau combinație de medicamente nu trebuie în niciun fel interpretată ca indicând faptul că medicamentul sau combinația de medicamente este sigură, eficientă sau adecvată pentru un anumit pacient. Drugslib.com nu își asumă nicio responsabilitate pentru niciun aspect al asistenței medicale administrat cu ajutorul informațiilor furnizate de Drugslib.com. Informațiile conținute aici nu sunt destinate să acopere toate utilizările posibile, instrucțiunile, precauțiile, avertismentele, interacțiunile medicamentoase, reacțiile alergice sau efectele adverse. Dacă aveți întrebări despre medicamentele pe care le luați, consultați medicul, asistenta sau farmacistul.

Cuvinte cheie populare