25.03.2024 – Eine neue Studie hat unlängst Informationen zur Männergesundheit von ChatGPT und der amerikanischen Urology Care Foundation™ (UCF) einem eingehenden Vergleich unterzogen. Ziel der Arbeit war es, die Lesbarkeit und Verständlichkeit der Informationsmaterialien über Männergesundheit zu bewerten und potenzielle Verbesserungsmöglichkeiten zu identifizieren.

Die Forschenden analysierten spezifische Ressourcen der UCF und verglichen diese mit den Antworten, die ChatGPT auf dieselben Fragen generierte. Zusätzlich baten die Wissenschaftler das Programm mithilfe spezieller Anweisungen (Prompts) darum, seine Antworten auf das Niveau eines Sechst- bis Achtklässlers anzupassen, um die Lesbarkeit und das Verständnis zu erhöhen. Zunächst fiel auf, dass die Antworten von ChatGPT tendenziell länger und komplexer waren als die Materialien der UCF. Allerdings zeigte sich auch, dass durch gezielte Anweisungen eine deutlich bessere Lesbarkeit erreichen konnte, die teilweise sogar über den Standards der UCF lag. Obgleich beide Quellen die empfohlenen Lesbarkeitsstandards anfangs nicht erfüllten, deutet die Studie darauf hin, dass KI-generierte Antworten durch spezifische Anfragen lesbarerer und dadurch auch allgemeinverständlicher gestaltet werden können. Die Studie verdeutliche somit das Potenzial von ChatGPT und ähnlichen Plattformen, medizinische Informationen für ein breiteres Publikum zugänglich zu machen. Durch gezieltere Anweisungen könnten komplexe Themen verständlicher aufbereitet werden, ohne an Genauigkeit einzubüßen, so die Autoren der Arbeit.

Tipp der DGMG: Obgleich es begrüßenswert ist, dass ChatGPT in der Vermittlung von Wissen zur Männergesundheit unterstützt, darf nicht vergessen werden, dass die Genauigkeit, insbesondere bei medizinischen Inhalten, noch nicht dem erforderlichen Standard entspricht. Fehler, veraltetes Wissen, aber vor allem auch erfundene Inhalte und fehlende Quellenangaben stellen hier ein besonderes Risiko dar. Ein aufklärendes Gespräch bei einem Männerarzt des Vertrauens wird daher in jedem Fall empfohlen.

Quelle: Shah YB et al., Comparison of ChatGPT and Traditional Patient Education Materials for Men’s Health. Urology Practice 2024. https://doi.org/10.1097/UPJ.0000000000000490
Bildnachweis: Bing Image Creator (DALL-E) [KI-generiert]