Bewertung der Wirksamkeit und Lesbarkeit von ChatGPT bei häufigen Fragen zur pädiatrischen Augenheilkunde und Strabismus.

Einführung: Der Anstieg der Beliebtheit von Chatbots, insbesondere ChatGPT von OpenAI, in der allgemeinen Öffentlichkeit und seine Nützlichkeit im Gesundheitswesen ist ein Thema der aktuellen Kontroversen. Die vorliegende Studie hatte zum Ziel, die Zuverlässigkeit und Genauigkeit der Antworten von ChatGPT auf Fragen, die von Eltern gestellt wurden, zu bewerten, und konzentrierte sich dabei auf eine Reihe von pädiatrischen augenheilkundlichen und strabismusbezogenen Erkrankungen. Methoden: Patientenanfragen wurden durch eine thematische Analyse gesammelt und jeweils in 3 einzigartigen Fällen an die Version 3.5 von ChatGPT gerichtet. Die Fragen wurden in 12 Bereiche unterteilt, die insgesamt 817 einzigartige Fragen umfassten. Alle Antworten wurden von zwei erfahrenen pädiatrischen Augenärzten auf der Grundlage der Antwortqualität in einem Likert-Skalenformat bewertet. Alle Fragen wurden hinsichtlich der Lesbarkeit mithilfe des Flesch-Kincaid-Gradniveaus (FKGL) und der Zeichenzählung bewertet. Ergebnisse: Insgesamt wurden 638 (78,09 %) Fragen als vollkommen korrekt bewertet, 156 (19,09 %) wurden als korrekt, aber unvollständig bewertet, und nur 23 (2,81 %) wurden als teilweise inkorrekt bewertet. Keine der Antworten wurde als komplett inkorrekt bewertet. Der durchschnittliche FKGL-Wert lag bei 14,49 (95 % CI 14,4004–14,5854) und die durchschnittliche Zeichenzahl bei 1825,33 (95 % CI 1791,95–1858,7) mit p = 0,831 und 0,697, jeweils. Die minimalen und maximalen FKGL-Werte lagen bei 10,6 und 18,34. Der FKGL prognostizierte die Zeichenzahl, R²=.012, F(1,815) = 10,26, p = .001. Fazit: ChatGPT lieferte für die Mehrheit der Fragen akkurate und zuverlässige Informationen. Die Lesbarkeit der Fragen lag weit über den typischerweise erforderlichen Standards für Erwachsene, was besorgniserregend ist. Trotz dieser Einschränkungen ist offensichtlich, dass diese Technologie eine bedeutende Rolle im Gesundheitssektor spielen wird.