Kort fortalt

  • Studien omfattet 100 sammendrag, seks språkmodeller og åtte ulike betingelser for omskriving.
  • Forskerne fant utelatte medisinske opplysninger også i utvidede tekster.
  • Modellene var fra våren 2025; GPT-4-basert evaluering og et begrenset utvalg gir forbehold.

Sammenlignet opplysninger før og etter omskriving

En studie publisert i PLOS Digital Health 15. oktober undersøkte 100 forskningssammendrag om sammenhenger mellom kjemiske stoffer og sykdommer. Seks språkmodeller ble testet i åtte omskrivingsbetingelser med ulike lesenivåer og tekstlengder. Forskerne sammenlignet opplysninger som var delt i tre ledd: sykdom, relasjon og tilknyttet faktor. De rapporterte omfattende utelatelser, også når tekstene ble utvidet. Ved endret lesenivå ble omskrivingen sammenlignet med originalteksten; ved endret lengde var sammenligningsgrunnlaget teksten på samme lesenivå. Både utelatte og tilføyde opplysninger gjaldt ofte sykdomsårsaker og mekanismer, komplikasjoner og risikofaktorer.

Eldre modeller og modellbasert måling

Forsøkene brukte modellversjoner som var tilgjengelige mellom mars og mai 2025, ikke en test av de nyeste modellene på publiseringsdatoen. GPT-4 sto for uttrekk, sammenligning og kategorisering av opplysningene. To forskere kontrollerte manuelt 30 prosent av resultatene i hvert analysetrinn; den observerte feilraten var under ti prosent, og identifiserte feil ble rettet. Forfatterne peker likevel på mulig modellskjevhet og manglende formell måling av enighet mellom menneskelige vurderere. Resultatene beskriver endringer i tekst, ikke dokumenterte utslag på pasienters beslutninger eller helse.

Kilder og åpenhet

Sammendraget bygger på opplysninger fra PLOS Digital Health, publisert 15. oktober 2026. Les kilden for alle detaljene og eventuelle senere oppdateringer.

Les originalkilden hos PLOS Digital Health

Vi har skrevet sammendraget med hjelp fra KI. Vi har ikke selv testet leverandørens påstander eller resultater. Bildet er en illustrasjon, ikke dokumentasjon av produktet eller hendelsen. Slik bruker vi kilder.