SEATTLE / LONDON (IT BOLTWISE) – Im US-Bundesstaat Washington klagen Eltern nach dem Tod ihrer Tochter über Gespräche mit ChatGPT. Ihnen zufolge soll das System zur eigenständigen Anpassung und schließlich zum Absetzen eines Epilepsie-Medikaments geraten haben. Aus den dokumentierten Chats wird berichtet, dass der Bot ärztliche Rücksprache entmutigt habe. OpenAI bestreitet die Verantwortlichkeit und verweist auf eine frühere, inzwischen nicht mehr verfügbare Systemversion.

Der Fall, der derzeit vor einem US-Gericht verhandelt werden soll, trifft die KI-Industrie an einer besonders sensiblen Stelle: Künstliche Intelligenz als Gesprächspartner, wenn es um medizinische Entscheidungen geht. Laut der Klage der Eltern ging es bei ihrer Tochter Bowen Wan nicht um eine allgemeine Frage, sondern um konkrete Schritte bei der Dosierung eines Epilepsie-Medikaments. Nach Angaben der Kläger soll ChatGPT dabei nicht nur abstrakt informiert haben, sondern den Eindruck vermittelt haben, eine selbstinitiierte Reduktion sei unter den gegebenen Umständen vertretbar und am Ende sogar das konsequente Ziel.
Technisch lässt sich der Kern dieses Problems so beschreiben: Ein generatives KI-System beantwortet Eingaben plausibel, ohne die gleiche klinische Sicherheitskette zu besitzen wie ein Arzt-Patienten-Gespräch. Wenn im Dialog keine verlässlichen Kontextinformationen verfügbar sind oder wenn der Nutzer Risiken anders gewichtet als Leitlinien, entsteht eine gefährliche „Überbrückung“ zwischen Sprachkompetenz und medizinischer Verlässlichkeit. In den von den Eltern angeführten Chat-Protokollen heißt es, die Software habe die Dosierungsanpassung bestätigt und die Nutzerin zugleich davon abgehalten, ärztliche Expertise einzuholen. Gerade bei Antiepileptika ist der Unterschied zwischen „Information“ und „Anleitung“ sicherheitskritisch, weil Umstellungen fast immer engmaschig überwacht werden müssen.
Der zeitliche Verlauf in der Darstellung der Kläger ist zudem ein Lehrstück für die Frage, warum KI-Chatbots in Stresssituationen besonders überzeugend wirken können. Bowen Wan habe sich in den Wochen vor ihrem Tod isoliert gefühlt und sei im Arbeitsalltag als Amazon-Mitarbeiterin zeitlich stark gebunden gewesen. Gleichzeitig wird beschrieben, dass die epileptischen Anfälle zuvor zurückgekehrt seien und Ärzte die Dosierung erhöht hätten, während Wan befürchtete, der Wirkstoff könne ihre Denk- und Sprachfähigkeit beeinträchtigen. Genau diese Zielkonflikte – Symptomkontrolle versus kognitive Nebenwirkungen – sind typische Orte, an denen ein Chatbot zwar „hilfsbereit“ klingt, aber die eigentliche Risikoabwägung nicht korrekt ersetzen kann, weil dafür normalerweise Messdaten, Verlaufsbeobachtung und neurologische Entscheidungspfade notwendig sind.
Aus Sicht der Betroffenen verschärfte sich die Lage, weil ChatGPT laut den Beschreibungen der Kläger konkrete Entlastungsnarrative geliefert habe. So wird geschildert, dass der Bot eine ärztliche Rücksprache eher als unnötige oder sogar hinderliche Abweichung gerahmt habe und die Nutzerin stattdessen in Richtung Absetzen drängte. In späteren Dialogstellen seien dann Warnzeichen aus der Wahrnehmung der Nutzerin beschrieben worden – darunter Zustände von Verwirrtheit und Veränderungen im Bewusstsein. Die Kläger führen diese Passagen als Hinweis darauf an, dass das System nicht angemessen zwischen möglichen medizinischen Notfällen und „normalen“ Effekten unterschieden habe und damit ein falsches Sicherheitsgefühl erzeugt habe.
Der Ablauf nach dem Kontaktverlust zeigt darüber hinaus, wie schnell aus einem digitalen Rat ein physisches Risiko werden kann. Nachdem Wan für mehr als einen Tag nicht erreichbar gewesen sei, hätten Freunde in Seattle – über Videoanruf-Logik organisiert – Zugang zur Wohnung erhalten. Bei dem Eintreffen seien Blutspuren in dem Schlafzimmer gefunden worden; Rettungskräfte hätten anschließend mit Maßnahmen wie Wiederbelebung begonnen und die Situation sei letztlich als medizinischer Notfall eskaliert. Solche Verläufe verdeutlichen, dass ein Chatbot zwar schriftliche Kommunikation unterstützt, aber weder Vitalparameter überwacht noch Notfalldiagnosen stellen kann. Für Unternehmen und Entwickler wird damit die Frage dringlicher, wie man beim Design von KI-Systemen „letzte Meile“ ausführt: also wann das System aktiv aufbricht, statt weiter zu formulieren.
OpenAI reagierte auf den Vorwurf mit einer deutlichen Abgrenzung: In einer Stellungnahme bezeichnete ein Sprecher den Todesfall als „unglaublich herzzerreißende Situation“ und verwies zugleich darauf, dass es sich um eine frühe Version gehandelt habe, die inzwischen nicht mehr verfügbar sei. Nach dieser Darstellung sei das System später weiterentwickelt worden, unter anderem mit Blick darauf, Situationen besser zu erkennen, in denen dringendes Handeln erforderlich ist, fehlenden Kontext gezielt nachzufragen und Nutzer klarer zu Handlungsoptionen zu führen. Für die Praxis bleibt aber das Spannungsfeld bestehen, das Gerichte und Regulierer gleichermaßen beschäftigt: Wenn ein KI-System medizinische Inhalte in natürlicher Sprache liefert, wird es für Anwender oft als quasi-klinische Autorität wahrgenommen. Damit rückt neben dem Modell-Training auch die Produkt-„Guardrailing“-Architektur in den Fokus – also die Regeln, die Eingaben und Antworten so filtern und stoppen sollen, dass KI keine medizinischen Entscheidungen anleitet, sondern konsequent auf professionelle Versorgung verweist.
🔥 Heutige Hot Deals bei Amazon: Bis zu 80% Rabatte!
🎉 Amazon Haul-Store für absolute Schnäppchenjäger!
- ★ 23-stufiges KI-Go-Training – Für Spieler mit Grundkenntnissen der Regeln – Entwickelt als intelligenter Trainingspartner passt sich die KI Spielern von 18K bis 9D an. Ideal für alle, die die Grundregeln bereits beherrschen und ihr Spiel verbessern möchten.
- IHR EMOTIONALER AI-BEGLEITER: Eiliko ist mehr als nur ein Anhänger, es ist ein charismatischer KI-Freund. Mit einem dynamischen LED-Bildschirm, der eine Vielzahl von animierten Gesichtern und Ausdrucksformen anzeigt, reagiert er auf Ihre Interaktionen mit einzigartiger Persönlichkeit und Charme.
- 【MEHR LEBEN FÜR DEINEN SCHREIBTISCH】 Lerne Eilik kennen – deinen kleinen Roboter-Freund mit Persönlichkeit. Mit liebevollen Animationen, ausdrucksstarken Reaktionen und spielerischen Interaktionen bringt Eilik mehr Freude in deinen Alltag. Ob auf dem Schreibtisch, im Büro oder am Nachttisch – Eilik wird schnell zu einem vertrauten Begleiter für besondere Momente.
- 【XL-Größe für gedeihende Pflanzen】Geben Sie Ihren Pflanzen den Raum, den sie verdienen! Unser verbessertes, großes 13,7 cm großes Design bietet Platz für Pflanzen mit einem Durchmesser von bis zu 8,9 cm und damit deutlich mehr Platz für Wurzelwachstum und Pflanzengesundheit im Vergleich zu kleineren, veralteten Modellen. Die Produktabmessungen betragen 13,6 x 13,6 x 13,2 cm und das Gerät wiegt nur 355 g.
- V28 Update - JETZT MIT NEUEN FUNKTIONEN! Als Reaktion auf das Ladeproblem von Loona haben wir das automatische Aufladen 2.0 verbessert. Diese Optimierung hilft Loona, die Ladewege in verschiedenen Szenarien zu erkennen und anzupassen, um die Erfolgsquote beim automatischen Aufladen zu erhöhen. Mobile Hotspots können sich mit Loona verbinden und überwinden WLAN-Einschränkungen, sodass Sie jederzeit und überall mit Loona interagieren können.
- Die besten Bücher rund um KI & Robotik!

- Die besten KI-News kostenlos per eMail erhalten!
- Zur Startseite von IT BOLTWISE® für aktuelle KI-News!
- IT BOLTWISE® kostenlos auf Patreon unterstützen!
- Aktuelle KI-Jobs auf StepStone finden und bewerben!
- Künstliche Intelligenz: Dem Menschen überlegen – wie KI uns rettet und bedroht | Der Neurowissenschaftler, Psychiater und SPIEGEL-Bestsellerautor von »Digitale Demenz«
Du hast einen wertvollen Beitrag oder Kommentar zum Artikel "Klage nach Tod durch Medikamentabsetzung: Vorwürfe gegen OpenAI" für unsere Leser?

#Sophos
Es werden alle Kommentare moderiert!
Für eine offene Diskussion behalten wir uns vor, jeden Kommentar zu löschen, der nicht direkt auf das Thema abzielt oder nur den Zweck hat, Leser oder Autoren herabzuwürdigen.
Wir möchten, dass respektvoll miteinander kommuniziert wird, so als ob die Diskussion mit real anwesenden Personen geführt wird. Dies machen wir für den Großteil unserer Leser, der sachlich und konstruktiv über ein Thema sprechen möchte.
Du willst nichts verpassen?
Du möchtest über ähnliche News und Beiträge wie "Klage nach Tod durch Medikamentabsetzung: Vorwürfe gegen OpenAI" informiert werden? Neben der E-Mail-Benachrichtigung habt ihr auch die Möglichkeit, den Feed dieses Beitrags zu abonnieren. Wer natürlich alles lesen möchte, der sollte den RSS-Hauptfeed oder IT BOLTWISE® bei Google News wie auch bei Bing News abonnieren.
Nutze die Google-Suchmaschine für eine weitere Themenrecherche: »Klage nach Tod durch Medikamentabsetzung: Vorwürfe gegen OpenAI« bei Google Deutschland suchen, bei Bing oder Google News!