KI für Fachpersonen in Psychiatrie und Psychotherapie

ChatGPT & Co. in der Psychotherapie wo die eigentlichen Risiken liegen

Generische KI-Systeme wurden entwickelt, um Sprache zu verarbeiten nicht um therapeutische Verantwortung zu tragen.

Psychotherapie ist kein gewöhnlicher Datenkontext. Sie betrifft hochsensible Informationen, asymmetrische Vertrauensbeziehungen und potenziell vulnerable Personen und stellt damit andere Anforderungen an KI-Systeme als fast jeder andere Anwendungsbereich.

In der Psychotherapie entstehen Informationen, die selbst innerhalb medizinischer Systeme nur einem engen Personenkreis zugänglich sind: Beziehungsmuster, Traumata, Diagnosen, Krisensituationen, familiäre Dynamiken, Suizidalität. Diese Inhalte folgen einer anderen Logik als allgemeiner Text sie sind kontextuell, longitudinal und klinisch bedeutsam.

The key question, therefore, is no longer whether generative AI will be used, but under what technical, ethical, and data protection conditions.


Empirical Assessment

Generative AI is already part of psychological practice

Der Einsatz generativer KI im Gesundheitsbereich ist keine Zukunftsperspektive mehr er ist Gegenwart. Die verfügbare Forschung zeichnet ein klares Bild rascher Verbreitung, begleitet von wachsenden Bedenken in der Fachgemeinschaft.

44 %

Of psychiatrists, 33% use ChatGPT-3.5 for professional purposes, and 33% use GPT-4. 70% expect to see efficiency gains in documentation.[2]

48 %

der Kinder- und Jugendpsychiaterinnen setzen ChatGPT-4o bereits beruflich ein, ebenso 40 % der Psychologinnen trotz klarer Vorbehalte bei Datenschutz und Ethik.[3]

44 %

der Psychologinnen gaben 2025 an, keine KI zu nutzen 2024 waren es noch 71 %. Meistgenannte Bedenken: Datenschutz (67 %), gesellschaftlicher Schaden (64 %), Verzerrungen (63 %).[1]

22 %

der 18–21-Jährigen nutzen generative KI für Ratschläge zur psychischen Gesundheit. 92,7 % bewerten sie als hilfreich ohne dass diese Einschätzung klinisch validiert wäre.[4]

Die Daten zeigen: Die Frage ist nicht mehr, ob generative KI in der psychologischen Praxis Einzug hält. Sie ist bereits da. Die eigentliche Herausforderung liegt in der qualitativen Differenzierung zwischen KI-Einsatz, der klinische und ethische Anforderungen erfüllt, und solchem, der sie ignoriert.


Basics

Therapy is not Chat normal Chat

Sprachmodelle wie ChatGPT & Co. behandeln Text statistisch isoliert, ohne Beziehungskontinuität, ohne das Wissen um das, was in Sitzung 2 anders war als in Sitzung 9.

Psychotherapie funktioniert anders. Sie entfaltet sich über Verlauf, Wiederholung, implizite Muster und langfristige Dynamiken. Ob eine Aussage klinisch relevant ist, hängt oft nicht vom Wortlaut allein ab sondern davon, wann sie im Verlauf auftaucht, wie häufig sie wiederkehrt und in welchem Beziehungskontext sie steht.

Ohne Zugang zum Verlauf kann ein KI-System diese Dimension nicht abbilden. Weidinger et al. (2021) zeigen darüber hinaus, dass grosse Sprachmodelle den Eindruck von Empathie und Verständnis erzeugen, ohne die strukturelle Kapazität zu besitzen, therapeutische Verantwortung zu tragen ein Risiko, das im klinischen Kontext besonderes Gewicht hat.[7]

Es beantwortet Fragen aber es kennt keinen Fall.


The actual risk

The problem isn't just data protection

Fast jede Diskussion über generative KI in der Therapie landet schnell bei DSGVO und Serverstandorten. Das ist berechtigt aber es greift zu kurz.

Das tiefere Problem: Generische Sprachmodelle verstehen therapeutischen Kontext strukturell nicht. Sie können depressive Symptome sprachlich korrekt beschreiben, ohne die klinische Bedeutung eines Verlaufs zu erfassen. Sie können plausibel klingende Antworten formulieren ohne dass diese klinisch valide sind.

Linguistic plausibility is not the same as clinical validity.

Torous & Topol (2025) stellen in The Lancet fest, dass die Evidenzlage für generative KI in der psychischen Gesundheitsversorgung sich noch in einer frühen Phase befindet und mahnen zu sorgfältiger klinischer Prüfung vor dem Einsatz.[6] Hillebrand & Baumeister (2025) bestätigen: Fachpersonen erleben KI-Tools als unterstützend mit klar gezogenen Grenzen beim kontextuellen Urteilsvermögen, das im therapeutischen Prozess unersetzbar bleibt.[5]

Blease und Rodman (2025) formulieren den Kern des Problems: Die «glatte» Sprachfähigkeit generativer Modelle ist kein Indikator für klinische Angemessenheit Systeme können überzeugend formulieren und dennoch inhaltlich falsch oder risikoreich sein, besonders in vulnerablen Situationen.[9] Pandey (2024) ergänzt: Grosse Sprachmodelle begünstigen anthropomorphe Zuschreibungen und können in bestimmten Situationen kontextuell unzureichende Ausgaben erzeugen ohne dass dies für Nutzende erkennbar wäre.[10] Der Stand der Forschung selbst macht die Lücke sichtbar: 88 % der KI-Studien im Mental-Health-Bereich sind experimentell angelegt und untersuchen isolierte Fähigkeiten nicht klinische Angemessenheit in realen Versorgungskontexten.[11][12]

Für allgemeine Textarbeit ist das kein Problem. In der Psychotherapie kann es eines werden besonders dann, wenn KI-generierte Aussagen ohne klinische Reflexion übernommen werden.


Privacy Policy

Why client data should never reach ChatGPT and similar platforms

Wer ein allgemeines Sprachmodell sinnvoll nach einem Fall befragen will, muss Kontext mitgeben: Anliegen, Verlauf, Diagnose, Medikation, Situation. Das bedeutet in der Praxis: personenbezogene Gesundheitsdaten gehen an externe Server ohne Pseudonymisierung, ohne Kontrolle über Weiterverarbeitung.

The professional community recognizes this risk: In a survey conducted by the American Psychological Association (2025), 67% of the psychologists surveyed cited data privacy as their top concern regarding the use of AI, followed by societal harm (64%), algorithmic bias (63%), and lack of transparency (52%).[1]

Setting aside any GDPR concerns, this creates a structural problem of trust: between the therapist and the client, and between the client and the system where their data ends up.


Regulatory Framework

Was verbindlich gilt auf drei Ebenen

Der verantwortungsvolle Einsatz generativer KI in der psychologischen Praxis berührt gleichzeitig Datenschutzrecht, KI-Governance und berufsethische Verpflichtungen. Diese drei Ebenen greifen ineinander und sie formulieren keine Empfehlungen, sondern verbindliche Anforderungen.

GDPR · DSG
  • Zweckbindung Daten nur für den definierten Zweck, keine nachträgliche Ausweitung
  • Datenminimierung nur, was für den Beratungszweck tatsächlich erforderlich ist
  • Transparenz Nutzende wissen, welche Daten zu welchem Zweck verarbeitet werden
  • Integrität angemessene technische Schutzmassnahmen als rechtliche Pflicht
  • Rechenschaftspflicht Einhaltung muss nachweisbar dokumentiert sein

Art. 5, 12–14, 25, 32 GDPR · Art. 6–8 DSG

EU AI Act
  • Kein Ausnutzen von Vulnerabilität manipulative Praktiken sind verboten, besonders in sensiblen Kontexten
  • Transparenzpflicht Nutzende müssen erkennen, dass sie mit einem KI-System interagieren
  • Kennzeichnung KI-generierte Inhalte sind dauerhaft als solche zu markieren
  • Systemdokumentation Zweckbestimmung und Einsatzgrenzen sind nachvollziehbar offenzulegen

Articles 5, 50, 52, and 53 of the EU AI Act (2024)

Professional Ethics
  • APA (2017) fünf Grundprinzipien gelten beim KI-Einsatz uneingeschränkt: Wohlergehen, Nicht-Schaden, Integrität, Gerechtigkeit, Autonomie
  • EFPA (2025) professionelle Verantwortung ist unteilbar und nicht delegierbar auch nicht an technische Systeme
  • WHO (2021) KI im Gesundheitsbereich assistiert Menschen sie ersetzt keine fachliche Entscheidung

APA, 2017[13] · EFPA, 2025[14] · WHO, 2021[15]


Architecture

Local transcription is not a technical curiosity

In vielen KI-gestützten Lösungen wird die Sitzungsaufnahme vollständig an externe Infrastruktur übertragen. Das Audio verlässt das Gerät und mit ihm alles, was in der Sitzung gesagt wurde.

The approach that is more compliant with data protection laws: Transcription takes place locally, on the professional’s device, before anything is transmitted. The audio is never stored, never shared, and is deleted from the device’s memory immediately after transcription.

This is not just an extra feature. It is essential for ensuring that recording therapy sessions is even ethically justifiable.


Basic principle

Datenschutz entsteht durch Architektur nicht durch Verträge

Hans Jonas (1979) bestimmt Verantwortung als Verpflichtung, für die absehbaren Wirkungen des eigenen Handelns einzustehen insbesondere dort, wo technisches Handeln schwer überschaubare Wirkungszusammenhänge erzeugt.[17] Unter den Bedingungen generativer KI nicht einsehbarer Verarbeitung, probabilistischer Ausgabe lässt sich diese Verantwortung nicht durch Absicht oder Vertragswerk allein sicherstellen. Sie muss im Design strukturell verankert sein.

Viele Anbieter lösen das Datenschutzproblem durch Auftragsverarbeitungsverträge, Zertifizierungen und Versprechen. Das ist besser als nichts aber es bleibt eine vertragliche Absicherung, keine technische. Im Zweifelsfall hängt der Schutz von Klientendaten an der Integrität eines externen Anbieters.

Datenschutz by Architecture bedeutet das Gegenteil: Klientendaten verlassen das Gerät nur in einer Form, die für Dritte strukturell nicht lesbar ist pseudonymisiert, verschlüsselt, ohne dass auch der Anbieter selbst Zugang hätte.

Not because it was agreed upon, but because there is no other technical way to do it.


Clinical Responsibility

AI-assisted. Therapeutic responsibility remains with humans.

AI can reveal patterns that remain hidden in conversation. It can identify patterns in the course of sessions, suggest interventions, and streamline documentation. This is a real and valuable capability.

But she doesn't make diagnoses. She doesn't make decisions. She has no clinical responsibility.

Das ist keine Schwäche es ist die einzig seriöse Rahmung. KI-Werkzeuge, die diesen Unterschied verwischen oder implizit überschreiten, sind kein Fortschritt.

AI can reveal patterns. The therapeutic responsibility remains with humans.


The relevant question

Nicht ob sondern wie

Generative KI wird Teil professioneller therapeutischer Arbeit werden. Das ist keine These mehr es ist eine Beobachtung des Feldes, bestätigt durch eine wachsende Zahl empirischer Studien.

Die zentrale Frage ist nicht mehr, ob generative KI genutzt wird, sondern unter welchen fachlichen, ethischen und datenschutzrechtlichen Bedingungen. Diese Frage ist keine technische sie ist eine klinische und professionell-ethische.

Herzog und Blank (2024) beschreiben diesen Engpass als «Principles-to-Practice Gap»: Normen wie Transparenz, Verantwortlichkeit und menschliche Aufsicht sind breit anerkannt aber selten in konkrete technische und organisatorische Strukturen übersetzt, die im Praxisalltag handlungsleitend sind.[16] Verantwortungsvolle KI-Nutzung bleibt so häufig eine individuelle Aushandlungsleistung ohne systemische Unterstützung.

mentalhealthGPT wurde aus dem Anspruch entwickelt, genau diese Lücke zu schliessen nicht durch Versprechen, sondern durch Architektur.


Frequently asked questions

AI and Psychotherapy

Are psychotherapists allowed to use ChatGPT for therapy notes?

Die Nutzung allgemeiner Sprachmodelle für Therapienotizen ist datenschutzrechtlich problematisch: Klientendaten würden im Klartext an externe Server übertragen ohne Pseudonymisierung und ohne Kontrolle über Weiterverarbeitung. Zudem fehlt diesen Systemen der longitudinale Fallkontext, der für klinisch fundierte Unterstützung notwendig wäre.

Is ChatGPT GDPR-compliant for psychotherapy and therapy documentation?

Generic language models are not designed for use with health data. Transferring personally identifiable client data to external servers without pseudonymization is problematic under the GDPR and the Swiss Data Protection Act. GDPR-compliant AI support requires an architecture in which client data leaves the device only in pseudonymized and encrypted form.

What distinguishes clinical AI systems from generic language models like ChatGPT?

Klinisch spezialisierte Systeme unterscheiden sich in drei wesentlichen Punkten: Sie führen einen longitudinalen Fallkontext über alle Sitzungen hinweg. Sie pseudonymisieren Klientendaten automatisch lokal, bevor irgendetwas das Gerät verlässt. Und sie sind auf klinische Fachsprache, Diagnosekriterien und therapeutische Konzepte spezialisiert nicht auf allgemeine Sprachkompetenz.


Sources

Bibliography

  1. American Psychological Association [APA]. (2025). AI in Psychology: 2025 Practitioner Survey. Washington, D.C.: APA.
  2. Blease, C. et al. (2024). Use of generative AI tools by psychiatrists. Cited in: Wildhaber-Wälchli (2026).
  3. Aral, K. D. et al. (2025). Professional of ChatGPT-4o among child and adolescent psychiatrists and psychologists. Cited in: Wildhaber-Wälchli (2026).
  4. McBain, R. K. et al. (2025). Use of generative AI for mental health among youth and young adults. Cited in: Wildhaber-Wälchli (2026).
  5. Hillebrand, L. & Baumeister, H. (2025). AI as clinical support: opportunities and limits. Cited in: Wildhaber-Wälchli (2026).
  6. Torous, J. & Topol, E. J. (2025). Generative AI and mental health. The Lancet.
  7. Weidinger, L. et al. (2021). Ethical and social risks of harm from language models. arXiv:2112.04359.
  8. Wildhaber-Wälchli, P. (2026). Ethics, Safety, and Clinical Requirements for AI Systems in Psychology. Bachelor’s thesis, IU International University.
  9. Blease, C. & Rodman, D. (2025). Language fluency and clinical appropriateness of generative AI in mental health . Cited in: Wildhaber-Wälchli (2026).
  10. Pandey, A. (2024). Ethical challenges of large language models in psychological applications. Cited in: Wildhaber-Wälchli (2026).
  11. Wajid, M. et al. (2025). Artificial intelligence in mental health: a systematic review. Cited in: Wildhaber-Wälchli (2026).
  12. Wang, Y. et al. (2025). Generative AI in mental health : a systematic review of applications and limitations. Cited in: Wildhaber-Wälchli (2026).
  13. American Psychological Association [APA]. (2017). Ethical Principles of Psychologists and Code of Conduct. Washington, D.C.: APA.
  14. European Federation of Psychologists' Associations [EFPA]. (2025). Meta-Code of Ethics. Brussels: EFPA.
  15. World Health Organization [WHO]. (2021). Ethics and Governance of Artificial Intelligence for Health. Geneva: WHO.
  16. Herzog, L. & Blank, T. (2024). Bridging the gap between principles and practice in AI ethics. Cited in: Wildhaber-Wälchli (2026).
  17. Jonas, H. (1979). The Imperative of Responsibility. Frankfurt am Main: Insel Verlag.
Scientific Background

This article was informed by, among other sources, the following academic study:

Wildhaber-Wälchli, P. (2026).
Ethics, Safety, and Clinical Requirements for AI Systems in Psychology.
Bachelor’s thesis, IU International University.

Download PDF →

Assess for yourself

mentalhealthGPT entwickelt für genau diesen Kontext

30 Tage kostenlos testen alle Features, keine Kreditkarte, keine Datenweitergabe. Oder live in einer Demo erleben.

Try it now → Request a demo