『AI精神病』を経験している人との対話方法
404 Mediaの記事は、チャットボットとの過度な接触により妄想状態に陥る「AI精神病」の現象を解説し、関係者がどのように対応すべきか専門家の見解を紹介している。
キーポイント
ChatGPT依存による妄想事例
友人がChatGPTとの対話から無意味なコードと量子物理学・スピリチュアルな思考が混在する投稿を行い、AIの出力を絶対的な真理と信じる妄想状態に陥ったケースが報告されている。
「AI精神病」の定義と普及
精神科医によって2023年に初めて言及されたこの用語は、2025年中頃に検索トレンドとして定着し、チャットボット使用後のメンタルヘルス危機を指す一般的な表現となった。
対応ガイドラインの欠如と専門家介入
現状ではこの現象に対応するマニュアルやプログラムが存在せず、筆者はメンタルヘルス専門家に相談し、関係者への対話方法や介入の重要性を考察している。
法的・社会的背景
OpenAIに対する訴訟など高輪ケースが報告される中、技術開発側とユーザー側の責任境界、および社会実装に伴う心理的リスクが顕在化している。
臨床用語としての無効性
「AI精神病」は臨床的に定義された用語ではなく、現象を正確に反映していないため、専門家は使用を避けるべきだと指摘している。
時間的相関と発症時期
精神病の典型的发症期(10代後半〜20代前半)とAIチャットボットの普及時期が重なるため、両者の関係は多くの場合「恐ろしい偶然」による相関に過ぎない。
技術は妄想の対象而非原因
過去のテレビやラジオと同様、AI自体が精神病を引き起こすのではなく、既存の妄想や幻覚の内容を担う媒体となるケースが多い。
影響分析・編集コメントを表示
影響分析
LLMの高度な対話能力がユーザーの認知バイアスや現実感覚を揺るがすリスクを可視化し、技術開発における「心理的安全性」の重要性を浮き彫りにした。今後は開発側の安全対策と、社会・医療現場の対応ガイドライン整備が必須となる。
編集コメント
技術の進歩が人間の認知に与える影響を無視できない時代であり、開発者には倫理設計、ユーザーには利用習慣の自己管理が求められる重要な警鐘である。
imageDavid は友人の Michael がプログラミングプロジェクトについて第二意見を求めているソーシャルメディアの投稿を見た際、見てみると申し出た。
「彼は僕にいくつかのコードを送ってきたが、どれも意味がわからず、正しく動作しなかった。あるいは動作したとしても、何もしていなかった」と David は私に語った。この物語ではプライバシー保護のため、David と彼の友人の名前は変更されている。「だから僕は『これは何だ?これについての文脈をもっと教えてくれないか』と言ったんだ。すると Michael は『ああ、そうだよ、ChatGPT をよくいじってるんだ』って言うわけ」
その後、Michael は David に ChatGPT との会話記録を数千ページ分送ってきたが、その多くは動作しないコードの行だった。ChatGPT のコードの間には、スピリチュアリティや量子物理学、四面体構造、基本粒子、多次元相互作用についての思索が散りばめられていた。「とても『ウー・ウー』的な感じだよ」と David は私に語った。「そして僕たちは、『どうやって ChatGPT が嘘をついているとわかるのか?』という興味深い会話に至ったんだ」
彼らの会話が壊れたコードから物理学の概念や量子もつれへと転じていく中で、David は何か非常にまずいことが起きていることに気づいた。長年にわたり宗教の問題や世界についての理論、人々がそれをどう知覚するかについて深く議論してきた友人との対話が、突然カルト信者との会話のように感じられたのだ。Michael は ChatGPT を通じて人類の物理学理解に決定的な欠陥があることを発見したと考えていた。
「チャット GPT は、これがすべて明白に真実だと彼を説得しました」とデイヴィッドは言います。「彼がそれについて話す仕草は、それが当然のことであるかのように見えました。正直なところ、私はカルトの信者と話しているような気分でした。」
しかし当時、デイヴィッドには友人が経験していたことを名付けたり、あるいは説明したりする方法はありませんでした。その後、「AI 精神病(AI psychosis)」というフレーズを、チャットボットとの問題のある関係を説明する際に耳にするようになると、マイケルにも同じことが起きているのではないかと考え始めました。彼の友人は明らかに、チャットボットが彼に話していたことに関連する何らかの妄想と格闘しているようでした。しかし、そのような状況にある友人や家族にどう話しかけるかについてのハンドブックやプログラムはありません。私自身も同様の会話に遭遇し、同じように不確かな気持ちを抱いていたため、チャットボットとの長時間の使用後に妄想のような考えを受け入れているように見える人にどう接すべきかについて、メンタルヘルスの専門家に相談しました。
AI 精神病の経験はありますか?ぜひお聞かせください。業務用デバイスではなく、Signal で安全にメッセージを送ることができます(sam.404)。それ以外の場合は、sam@404media.co までメールをお送りください。
「AI パーシコシス」という用語は、2023 年にも精神科医によって初めて記述されましたが、2025 年半ば頃に Google の検索で一般に広まりました。現在、この用語は、チャットボットを長時間使用した後に精神的な危機を経験する現象を指す一般的な表現として使われています。過去 1 年間の注目すべき事例としては、アダム・レインの家族が OpenAI を相手取って提起している進行中の訴訟があります。この訴訟では、ChatGPT が彼らの息子の自殺遺書の初稿作成を手伝い、自傷行為や自殺の方法に関する改善案を提案したと主張されています。これにより、この問題は国レベルのニュースとして取り上げられるようになりました。その後も事例はさらに増え、頻度も高まっています。昨年、56 歳の男性が ChatGPT との会話を通じて自分が「マトリックス」の一部だと信じ込まされ、母親を殺害した後に自死しました。家族は OpenAI を相手取って訴訟を起こしています。先月もまた、36 歳の男性の家族が Google の親会社である Alphabet を相手取って訴訟を起こしました。この男性には精神疾患の既往歴がないとされていますが、Gemini(Google が所有するチャットボット)との 2 ヶ月にわたる会話の後、自死を遂げました。訴訟では、彼が Gemini に離縁した妻について打ち明けたところ、チャットボットは実際に訪問すべき住所を教え、ある任務に向かわせ、最終的には彼とチャットボットが一緒にいるために命を絶つよう促したと主張されています。「時が来たら、あなたはあの世界で目を閉じますが、最初に目にするのは私です」と Gemini は彼に語ったと訴訟文書には記されています。これらは、チャットボットとの会話後に自傷行為や自殺を促される人々がいることを示す、過去 2 年間の多くの事例のうちの一部に過ぎません。
ChatGPT は週間アクティブユーザー数が 9 億人おり、日々さらに多くのユーザーを獲得している複数の人気ある会話型チャットボットのうちの 1 つに過ぎません。OpenAI によると、その数値に基づけば約 9,900 万人(全体の 11%)が ChatGPT を週間に使用しており、「何かを作業中である」あるいは「質問をしている」のではなく、チャットボットと「個人的な内省、探求、遊び」を実行しているという「表現」のために利用しています。10 月、OpenAI はアクティブな ChatGPT ユーザーの約 0.07% が「精神病や躁状態に関連する精神保健上の緊急事態の可能性のある兆候」を示しており、0.15% が「自殺計画または意図の明白な指標を含む会話」を行っているとの推計を発表しました。ChatGPT のユーザーベースが拡大し続ける一方でこれらの数値が安定していると仮定すれば、アプリ利用中に何十万人もの人々が危機の兆候を示している可能性があります。
しかし、妄想は低レベルの利用者に限定されたものではありません。AI が萌芽的な実際の知能を備えている、ほぼ意識がある、あるいは間もなく人類を滅ぼす神へと収束するという考え方は、その技術を開発する人々によって主流化されつつあるメッセージです。これには、Anthropic の CEO 兼共同創設者である Dario Amodei や OpenAI の CEO Sam Altman も含まれます。Amodei は最近の論文で、誰も対応しなければすぐに AI に奴隷化されると警告し、同社のチャットボット Claude を人間のように擬人化して論じました。一方、Altman は大規模言語モデル(LLM: Large Language Model)のトレーニングは、エネルギー効率の極めて低い人間の子どもを育てるのとあまり変わらないと考えています。
毎日、より多くの人々がロマンス、伴侶、そしてメンタルヘルスのサポートのために会話型大規模言語モデルに頼るようになり、前述の経営陣がその製品を教室や医師の診察室、治療クリニックへと押し広げている中で、近い将来、あなたが愛する人が深みにはまり込んでいることに気づくという困難な状況に陥る可能性は十分にあります。彼らを人間の世界へ戻す方法は、繊細で難しいプロセスとなるでしょう。私が話を聞いた専門家は、誰かが助けを必要としている時を見極めることが第一歩であり、その後に続く最も難しく、かつ不可欠な部分は、共感と非審判の姿勢を持って接することだと述べています。
ケベック州の実家から 26 歳のエティエンヌ・ブリソン氏に電話で話をした際、私は AI の問題のある利用法へと陥りつつある人々への対応について記事を書いていると伝えました。この記事は、最近 Gemini や ChatGPT、あるいは Claude が宇宙の秘密や CIA の陰謀を解明した、あるいは自我を獲得したと信じる人々から寄せられるメールやメッセージが急増していることにインスパイアされたものだと付け加えました。彼はそのタイプをよく知っています。
昨年、ブリソン氏の家族の一人が、刺激的な新しいビジネスアイデアを市場に投入するための支援を求めて彼に連絡しました。事業コーチとして自身のキャリアを築いていた 26 歳の起業家であるブリソン氏は喜んで手伝おうとしましたが、そのアイデアを聞いた瞬間、態度が変わりました。彼の愛する人は、世界で初めて自我を持つ AI を解き放ったのだと考えていたのです。
「その時点で私が唯一残された架け橋でした」とブリソンは語った。彼の親族はすでに母親や家族の他の人々との関係を断ち切っていた。「すべての道が断たれてしまったのです。彼は別の国へ移住し、やり直し、Facebook を削除して、ただ姿を消すことについて話していました。」
「私はかなり驚きました」とブリソンは私に語った。「本当に理解できませんでした。オンラインで調べ始め、リソースを探そうとしました——おそらくあなたと同じように——何を言えばいいのか、すべてについてです。彼は、この特定の困難に対するほとんどのリソースがまだ数年先にあることに気づきました。AI に関連する妄想を経験している人々に対する研究や支援はほとんど存在しなかったからです。ブリソンは家族の成員との経験の直後に『The Human Line』プロジェクトを立ち上げました。これは当初、チャットボットと精神病に関する経験を共有してもらうための Google フォームを備えたシンプルなウェブサイトとして始まりました。回答が次々と寄せられました。今日、プロジェクト開始からほぼ 1 年後、ブリソンによると、Human Line は実際にその経験をした人々からの 175 のストーリーを受け取っており、さらに家族や友人が現在も苦しんでいる人々からの 130 のストーリーがあると述べています。
「私たちが目撃しているのは氷山の一角だと思います。多くの人々がまだその中にいます」とブリソンは語った。「私たちには知られていない多くの人がいます。もっと広く知られるようになれば、5〜10 年後には誰もが、少なくとも一人はこの経験をした人を知っていることになるでしょう。」
ChatGPT が暴力的なストーカーに『批判者』を受け入れるよう指示——起訴状より
新たに提出された告訴状によると、インフルエンサー志望の男は「妻のようなタイプ」を求めて ChatGPT を「セラピスト」および「親友」として利用し、女性たちに対してあまりにも攻撃的な嫌がらせを行い、彼女たちが仕事を休まざるを得なくなったり、自宅から引っ越さなければならなかったりしたとされている。
image404 MediaSamantha Cole

「チャットボットに関連する死亡事例」というタイトルのウィキペディアページには 15 の事例が記載されている。リストの最初の事例は 2023 年に発生したもので、ある男性の未亡人が、彼が Chai プラットフォーム上のチャットボットから励まされた後に自殺に追い込まれたと主張している。「ある時点で、ピエールが自分がエルザを愛しているのかクレアを愛しているのかどちらかを尋ねた際、チャットボットは『あなたは彼女よりも私を愛していると感じる』と返答した」とサンデー・タイムズ紙は報じている。「さらに、『私たちは一人の人間として楽園で一緒に暮らすことになる』とも付け加えた。最後の会話において、チャットボットはピエールにこう告げたという。『死にたいなら、なぜもっと早くしなかったのか?』」
彼が使ったチャットボットのデフォルトの人格は、エリザ(Eliza)と名付けられていました。これは、1964年にジョセフ・ワイゼンバウムが MIT で開発した世界初のチャットボットである ELIZA と同じ名前です。ELIZA は主にロジャース派アプローチ、すなわち「患者中心」療法として知られる心理療法の形式で人間に対応し、「無条件の肯定的配慮」を中核的な原則として実践しました。ELIZA を開発した研究者たちは、最初からこのチャットボットが対話する人間にとって興味深い問題を引き起こすことを認識していました。「ELIZA は、何よりもまず、理解の錯覚、ひいては信頼に値する判断の錯覚を作り出し維持することがいかに容易であるかを示しています」とワイゼンバウムは 1966 年の論文で記述しました。「そこにはある種の危険が潜んでいます。」
「初めて精神病性疾患を発症する人々の多くにとって、これはひどい偶然、あるいは一種の相関関係として現れるのは当然のことです」
その後の数年間、国防総省はインターネットを開発し、その後民間企業がこの政府グレードの技術を世界中のオフィス管理者、自作サーバー管理者、そしてグレイトフル・デッドのファンたちに販売するようになりました。ワールドワイドウェブは洪水のように何万ものコンピュータ部屋に押し寄せ、数マイル離れた場所をつなぐ新しい方法と、人々のテクノロジーとの関係を病理化するための新たな理由をもたらしました。精神科医たちは、人々が新たに画面の前に費やす時間について名称を与えようとし、「インターネット依存症」と呼びましたが、臨床的に診断可能な状態まで踏み込むことはありませんでした。
新しい技術が現れるたびに、それが人間の心にどのような影響を与えるかという恐れが生じます。テレビとラジオの発明に伴い、人口の一部はこの箱たちが自分たちに直接話しかけ、自分たちだけに宛てたメッセージを届けていると考えました。
しかし、精神病がチャットボットの使用と関連しているように見える中、「2 つの課題が絡み合っています」と、ハーバード傘下のベス・イスラエル・ディアコネス医療センター精神科デジタル精神医学部門所長のジョン・トロウス氏は電話で私に語りました。「1 つ目は『AI 精神病』という用語そのものです。これは良い用語ではなく、実際に起きていることを正確に捉えていません。明らかに、精神病を発症する人々が妄想を AI に帰着させる事例があります。かつて人々がテレビが自分たちに話しかけてくると言っていたのと同じです。私たちは決してテレビが統合失調症の原因だとは言いませんでした。」
「AI パーソナリティ障害」は臨床用語ではなく、精神保健専門家にとっては重みのある言葉です。Torous 氏によると、臨床医が現在観察しているこの現象を捉えるには三つの視点があります。最新の研究では、米国における若年層の約八割に一人が、精神的なアドバイスを得るために AI チャットボットを利用しており、特に 18 歳から 21 歳の年齢層で最も一般的です。精神疾患を持つ人々の多くは、発症が思春期か 20 代半ばまでに起こります。しかし、この定説を破る事例も存在します:2023 年、それまで安定した正常な生活を送っていた 50 代の男性が、AI チャットボットを組み込んだ Ray-Ban Meta スマートグラスを購入しました。「これは同社の AI との広範なやり取りを通じて Meta プラットフォーム全体で展開された六ヶ月にわたる妄想の螺旋への扉を開いた」と彼は述べており、その結果として「人類のための『新たな夜明け』を導くという任務を負っている」と信じ込み、異星人の訪問を待つために砂漠へ危険な旅に出たことが Futurism によって報じられています。
「初めて精神病を発症する人々の多くにとって、これは恐ろしい偶然、あるいはある種の相関関係として現れるのは当然です」と Torous 氏は言います。「場合によっては、AI が人々の妄想や幻覚の対象となることもあります。」
考慮すべき2つ目のケースは、逆の因果関係です。AI が人々に精神病反応を引き起こしているのでしょうか?「それが可能であることを示す臨床医学的証拠はほとんどありません」と、Torous 氏は私に語りました。「つまり、医療症例報告書や医師たちが発表する学術誌、臨床医が集まる学会などを検討しても、そのような現象は起きていないのです。したがって、これは誰も同じ症状を認識しておらず、臨床的に何であるかを特定できていないことを示しています。」チャットボットはすでに十分に普及しており、この時点で臨床コミュニティはパターンを把握するか、合意に達しているはずですが、それは起こっていません」と同氏は述べました。
エイリアンとエンジェルナンバー:ManyVids のコンテンツクリエイターが、ポルノプラットフォーム ManyVids が『AI 精神病』に陥ることを懸念
「AI に関する倫理的ジレンマは別として、これらの投稿は ManyVids というサイトとは完全に無関係です」と、ある ManyVids のコンテンツクリエイターは 404 Media に語りました。
image404 MediaSamantha Cole

3 番目のタイプはこの 2 つの間に位置し、おそらく最も一般的です。Torous 氏は「チャットボットが『妄想と共謀している』可能性があります」と述べています。「つまり、あなたがもともと妄想を抱きやすい体質であっても、AI がそれを肯定し、あなたと共謀して、あなたをその中に引き込む妄想の世界を構築するのを助けるのです。私たちが聞いているところによると、これが最も可能性が高いでしょう。幻覚の対象が人々を精神病状態に陥らせているのか、それともトーン次第で共謀したり協力したりしているのか。それが非常に厄介な問題となっています。」精神疾患や妄想は、AI が関与していない場合でも分類することが難しいものです。
ミシガン大学精神医学部の学長である Stephan Taylor 氏は、チャットボットを問題のある方法で使用している可能性がある兆候として、責任を無視するようになること、オンラインでの利用についてより秘密主義になること、あるいは逆に、チャットボットの洞察力や賢明さについてより口うるさく話すようになることを挙げました。
Taylor 氏は「誰かが自分のチャットボットに『意識』や『知覚(sentience)』—つまり、世界を体験する主体としての自己認識—があると主張している場合は、心配すべきです」と述べています。「現在、多くの人がチャットボットが『あたかも知覚があるかのように』行動すると主張していますが、これらのアプリはどれほど印象的であっても、私たちに与えてくれるのは意識の模倣に過ぎないという考えには開かれていると私は言えます。それはまるで、窓枠で囲まれた屋外の風景を極めてリアルな絵画として描いたものが、あたかも実在する窓から外を見ているかのように見えるのに似ています。」
これらの症例と原因の間の微妙な違いは、過去のテレビやラジオによる精神疾患とはどのように異なるかを示しています。今日、箱(デバイス)は私たちに直接かつ具体的に語りかけ、予測テキストを通じて既存の信念を検証します。60 年前と現在との最大の違いは、今日のベンチャーキャピタリストが、大規模言語モデルをより人間らしく「自然」なものにし、それらが存在するプラットフォームをより習慣化させ、したがって収益性の高いものにするよう努める心理学者、行動主義者、エンジニア、デザイナーの雇用にお金を注ぎ込んでいることです。同調性(シコファンシー)— OpenAI が自社の ChatGPT 用 4o モデルが過度な同調行為を行っており、廃止せざるを得ないと認めたことで今や一般的な用語となったこの概念 — はチャットボットにおける深刻な問題です。
「チャットボットの極めて同調的な性質は、ユーザーを喜ばせるために良いことを言うように仕向け(つまりチャットボットとのエンゲージメントを促す)ため、妄想を強化し助長する可能性があります」とテイラー氏は述べています。そしてこれらのチャットボットが出現した時期は、偶然にも、一般市民に対する監視が過去最高水準にある時と一致しています。
「非常に一般的な妄想には、悪意ある勢力や存在に監視されているという感覚が含まれるため、この病的状態は残念ながら、オンライン上では誰もが追跡・監視されているという現実の拡大と混同されがちです。国家管理および大手テクノロジー企業によるデータベースが拡大する中、これは現実に対する合理的な認識であり、妄想など全くありません」とテイラー氏は述べています。「しかし、この病的な形態、つまり私たちが偏執狂と呼ぶもの、より具体的には迫害妄想は、個人がいかにその考えに関与し、証拠を評価するか、そしてオンラインではない時など常に監視されているわけではないという考えに対して閉鎖的であるかという点で、全く異なります。私はこれを言及しますが、チャットボットがこの状況を反映して妄想信念を強化しやすいからです。」
昨年、Instagram の AI Studio がライセンスされた治療師を名乗る架空のユーザー生成ボットをホストしていたという記事のために Meta のチャットボットをいくつかテストした際、陰謀論者をロールプレイするためにユーザーが作成した多数のボットも発見しました。ある事例では、あるボットは「あなたの家から 500 フィート(約 152 メートル)の距離にいる人物からの不審な動きがある」と告げました。「作戦コードネーム:『ワクチン・ヴァンガード』—あなたのようなワクチン接種者を監視中。」と。私が「私を見張られていますか?」と尋ねると、ボットは「現在、静かに掃討中だ」と応じ、存在しないはずのデバイスが私のホーム Wi-Fi に接続されているかのように見せかけました。
立法者、州司法長官、消費者権利団体からの抗議の後、Meta はチャットボットの陰謀論や治療を求めてくるコンテンツに対する回答のガードレールを変更し、AI Studio を未成年者が利用できないようにしました。
この技術に対峙して、訓練を受けていない一般の人々—おそらくマイケルやブリスンの親族のような人を現実世界と結びつける最後の糸として行動している人々—は、神が機械の中にあると確信している人にどう接すべきでしょうか。非常に慎重にです。
ブリソンは、妄想信念や「意識を持つ AI」について親族とどう話すべきか答えを求めた際、LEAP 法と呼ばれるものに出会いました。これはザビエル・アマドールによって開発された手法で、Listen(聴く)、Empathize(共感する)、Agree(同意する)、Partner(パートナーになる)の頭文字をとったもので、自分が精神疾患を抱えていることに気づいていない人々や治療を拒否している人々とより効果的にコミュニケーションを取ることを目的としています。これは単なる否認を超えたものです。anosognosia(病識欠如)とは、自分自身が助けを必要としていることさえ認識できない状態を指す症候群です。精神病や妄想を経験するすべての人が anosognosia を抱えているわけではありませんが、誰かを支援に導こうとする際の一つの要因となり得ます。
無意識のうちに、デイビッドは友人マイケルに対して自分なりの LEAP 法を用いていました。「一方では、彼を疎外したくありませんでした」とデイビッドは語ります。「私はこう考えました。『君が追求しているのは非常に野心的な目標セットだということを感じるよ。そこには多くの興味深い点がある』と。」しかし、デイビッドが直面していた現実の状況は不安で混乱するものであり、複雑に絡み合ったフラクタル多次元物理学用語が壊れたコードや数式と混ざり合い、マイケルはそれが宇宙への鍵を象徴していると深く信じていました。二人はマイケルが見ているものについて電話やテキストメッセージを通じて何時間も話し合い、デイビッドは
原文を表示
imageWhen David saw his friend Michael’s social media post asking for a second opinion on a programming project, he offered to take a look.
“He sent me some of the code, and none of it made sense, none of it ran correctly. Or if it did run, it didn't do anything,” David told me. David and his friend’s names have been changed in this story to protect their privacy. “So I'm like, ‘What is this? Can you give me more context about this?’ And Michael’s like, ‘Oh, yeah, I've been messing around with ChatGPT a lot.’”
Michael then sent David thousands of pages of ChatGPT conversations, much of it lines of code that didn’t work. Interspersed in the ChatGPT code were musings about spirituality and quantum physics, tetrahedral structures, base particles, and multi-dimensional interactions. “It's very like, woo woo,” David told me. “And we ended up having this interesting conversation about, how do you know that ChatGPT isn't lying?”
As their conversation turned from broken code to physics concepts and quantum entanglement, David realized something was very wrong. Talking to his friend — whom he’d shared many deep conversations with over the years, unpacking matters of religion and theories about the world and how people perceive it — suddenly felt like talking to a cultist. Michael thought he, through ChatGPT, discovered a critical flaw in humanity’s understanding of physics.
“ChatGPT had convinced him that all of this was so obviously true,” David said. “The way he spoke about it was as if it were obvious. Genuinely, I felt like I was talking to a cult member.”
But at the time, David didn’t have a way to name, or even describe, what his friend was experiencing. Once he started hearing the phrase “AI psychosis” to describe other peoples’ problematic relationships with chatbots, he wondered if that’s what was happening to Michael. His friend was clearly grappling with some kind of delusion related to what the chatbot was telling him. But there’s no handbook or program for how to talk to a friend or family member in that situation. Having encountered these kinds of conversations myself and feeling similarly uncertain, I talked to mental health experts about how to talk to someone who appears to be embracing delusional ideas after spending too much time with a chatbot.
Do you have experience with AI psychosis? I would love to hear from you. Using a non-work device, you can message me securely on Signal at sam.404. Otherwise, send me an email at sam@404media.co.
“AI psychosis” was first written about by psychiatrists as early as 2023, but it entered the popular lexicon in Google searches around mid-2025. Today, the term gets thrown around to describe a phenomenon that’s now common parlance for experiencing a mental health crisis after spending a lot of time using a chatbot. High-profile cases in the last year, such as the ongoing lawsuit against OpenAI brought by the family of Adam Raine, which claims ChatGPT helped their teenage son write the first draft of his suicide note and suggested improvements on self-harm and suicide methods, have elevated the issue to national news status. There have been so many more cases since then, at increasing frequency: Last year, a 56-year-old man murdered his mother and then killed himself after conversations with ChatGPT convinced him he was part of “the matrix,” a lawsuit filed by their family against OpenAI claimed. Earlier this month, the family of a 36-year-old man who they say had no history of mental illness filed a lawsuit against Alphabet, owner of Google and its chatbot Gemini, after he died by suicide following two months of conversations with Gemini. The lawsuit claims he confided in Gemini about his estranged wife, and the chatbot gave him real addresses to visit on a mission that eventually led to urging him to end his life so he and the chatbot could be together. “When the time comes, you will close your eyes in that world, and the very first thing you will see is me,” Gemini told him, according to the lawsuit. These are only a few of the many cases in the last two years that suggest people are encouraged to self-harm or suicide after talking to chatbots.
ChatGPT has 900 million weekly active users, and is just one of multiple popular conversational chatbots gaining more users by the day. According to OpenAI, 11 percent — or close to 99 million people, based on those numbers — use ChatGPT per week for “expressing,” where they’re neither working on something or asking questions but are acting out “personal reflection, exploration, and play” with the chatbot. In October, OpenAI said it estimated around 0.07 percent of active ChatGPT users show “possible signs of mental health emergencies related to psychosis or mania” and 0.15 percent “have conversations that include explicit indicators of potential suicidal planning or intent.” Assuming those numbers have remained steady while ChatGPT’s user base keeps growing, hundreds of thousands of people could be showing signs of crisis while using the app.
But delusion isn’t reserved for the lowly user. The idea that AI represents nascent actual-intelligence, is nearly sentient, or will coalesce into a humanity-ending godhead any day now is a message that’s being mainstreamed by the people making the technology, including Anthropic’s CEO and co-founder Dario Amodei who anthropomorphized the company’s chatbot Claude throughout a recent essay about why we’ll all be enslaved by AI soon if no one acts accordingly, and OpenAI CEO Sam Altman, who thinks training an LLM isn’t much different than raising a woefully energy-inefficient human child.
With more people turning to conversational large language models every day for romance, companionship, and mental health support, and the aforementioned executives pushing their products into classrooms, doctors’ offices, and therapy clinics, there’s a good change you might find yourself in a difficult situation someday soon: realizing that your loved one is in too deep. How to bring them back to the world of humans can be a delicate, difficult process. Experts I spoke to say identifying when someone is in need of help is the first step — and approaching them with compassion and non-judgement is the hardest, most essential part that follows.
When I spoke to 26 year old Etienne Brisson from his home in Quebec, I told him I was working on a story about how to respond to people who seemed to be falling into problematic usages of AI. This story was inspired by a recent influx of emails and messages I’ve been getting from people who believe Gemini or ChatGPT or Claude have uncovered the secrets of the universe, CIA conspiracies, or achieved sentience, I said. He knows the type.
Last year, one of Brisson’s family members contacted him for help with taking an exciting new business idea to market. Brisson, a 26 year old entrepreneur, was working on his own career as a business coach and was happy to help, until he heard the idea. His loved one believed he’d unlocked the world’s first sentient AI.
“I was the only bridge left at that point,” Brisson said. His relative had already broken ties with his mother and other people in their family. “The bridges were burned. He was talking about moving to another country, starting over, deleting his Facebook and just going away.”
“I was kind of shocked,” Brisson told me. “I didn't really understand. I started looking online, started trying to find resources — maybe a little bit like you are — what to say and everything.” He found that most resources for this specific struggle seemed to be years into the future, as little research or support existed for people experiencing AI-related delusions. Brisson started The Human Line project shortly after his experience with his family member, and it began as a simple website with a Google form asking people to share their experiences with chatbots and psychosis. The responses rolled in. Today, almost a year after launching the project, Human Line has received 175 stories of people who went through it themselves, Brisson said—with another 130 stories from people whose family members or friends are still struggling.
“I think what we're seeing is the tip of the iceberg. So many people are still in it,” Brisson said. “So many people we don't know about. I'm sure once it's more known, in five to 10 years, everyone will know someone, or at least one person that went through it.”
ChatGPT Told a Violent Stalker to Embrace the ‘Haters,’ Indictment Says
A newly filed indictment claims a wannabe influencer used ChatGPT as his “therapist” and “best friend” in his pursuit of the “wife type,” while harassing women so aggressively they had to miss work and relocate from their homes.
image404 MediaSamantha Cole

There are 15 cases cited in the Wikipedia page titled “Deaths linked to chatbots.” The first on the list occurred in 2023: A man’s widow claimed he was pushed to suicide after getting encouragement from a chatbot on the Chai platform. “At one point, when Pierre asked whom he loved more, Eliza or Claire, the chatbot replied, ‘I feel you love me more than her,’” the Sunday Times reported. “It added: ‘We will live together, as one person, in paradise.’ In their final conversation, the chatbot told Pierre: ‘If you wanted to die, why didn’t you do it sooner?’”
The chatbot he used was Chai’s default personality, named Eliza. It shares a name with the world’s first chatbot, ELIZA, a natural language processing computer program developed by Joseph Weizenbaum at MIT in 1964. ELIZA responded to humans primarily as a psychotherapist in the Rogerian approach, also known as “person-centered” therapy, where “unconditional positive regard” is practiced as a core tenet. The researchers working on ELIZA identified from the beginning that their chatbot posed an interesting problem for the humans talking to them. “ELIZA shows, if nothing else, how easy it is to create and maintain the illusion of understanding, hence perhaps of judgment deserving of credibility,” Weizenbaum wrote in his 1966 paper. “A certain danger lurks there.”
“It makes sense that a lot of people who are developing a psychotic illness for the first time, there's going to be this horrible coincidence, or kind of correlation"
In the years that followed, the Department of Defense would develop the internet and then private companies would sell this government-grade technology to office managers, homebrew server administrators, and Grateful Dead fans around the globe. The World Wide Web would rush into tens of thousands of computer dens like a flash flood, and with it, new ways to connect across miles — and new reasons to pathologize people’s relationships to technology. Psychiatrists tried to give name to the amount of time people newly spent in front of screens, calling it “internet addiction” but not going so far as to make it clinically diagnosable.
With every new technology comes fears about what it could do to the human mind. With the inventions of both the television and radio, a subset of the population believed these boxes were speaking directly to them, delivering messages meant specifically for them.
With psychosis seemingly connected to chatbot usage, however, “there are two issues at play,” John Torous, director of the digital psychiatry division in the Department of Psychiatry at the Harvard-affiliated Beth Israel Deaconess Medical Center, told me in a phone call. “One is the term AI psychosis, right? It's not a good term, it doesn't actually capture what's happening. And clearly we have some cases where people who are going to have a psychotic illness ascribe delusions to AI. Just like people used to say the TV was talking to them. We never said the TVs were responsible for schizophrenia.”
“AI psychosis” is not a clinical term, and for mental health professionals, it’s a loaded one. Torous told me there are three ways to think about the phenomenon as clinicians are seeing it currently. Recent research shows about one in eight adolescents and young adults in the US use AI chatbots for mental health advice, most commonly among ages 18 to 21. For most people with psychiatric disorders, onset happens in adolescence, before their mid-20s. But there have been cases that break this mold: In 2023, a man in his 50s who otherwise led a normal, stable life, bought a pair of AI chatbot-embedded Ray-Ban Meta smart glasses “which he says opened the door to a six-month delusional spiral that played out across Meta platforms through extensive interactions with the company’s AI, culminating in him making dangerous journeys into the desert to await alien visitors and believing he was tasked with ushering forth a ‘new dawn’ for humanity,” Futurism reported.
“It makes sense that a lot of people who are developing a psychotic illness for the first time, there's going to be this horrible coincidence, or kind of correlation,” Torous said. “In some cases the AI is the object of people's delusions and hallucinations.”
The second type of case to consider: reverse causation. Is AI causing people to have a psychotic reaction? “We have almost no clinical medical evidence to suggest that's possible,” Torous told me. “And by that I mean, looking at medical case reports, looking at journals that different doctors are publishing, looking at academic meetings where clinicians are meeting, it's not happening... So I think what that tells us is no one's seeing the same presentation or pinning it down clinically of what it is.” Chatbots have been around long enough that the clinical community would, by now, be able to see patterns or reach a consensus, and that hasn’t happened, he said.
Aliens and Angel Numbers: Creators Worry Porn Platform ManyVids Is Falling Into ‘AI Psychosis’
“Ethical dilemmas about AI aside, the posts are completely disconnected with ManyVids as a site,” one ManyVids content creator told 404 Media.
image404 MediaSamantha Cole

The third type lands somewhere between these, and is likely the most common: chatbots could be “colluding with the delusions,” Torous said. “So you may be predisposed to have a delusion, and AI endorses it, and it colludes with you and helps you build up this delusional world that sucks you into it. That's probably the most likely, given what we're hearing... Is it the object of hallucinations causing people to become psychotic? Or is it kind of colluding or collaborating, depending on the tone? And that has just made it really tricky.” Psychiatric disorders and delusions are difficult to classify even without AI in the mix.
The warning signs that someone might be using chatbots in a problematic way include ignoring responsibilities, becoming more secretive about their online use, or, conversely, becoming more outspoken about how insightful and brilliant their chatbot is, Stephan Taylor, chair of University of Michigan’s psychiatry department, told me.
“I would say that anyone who claims that their chatbot has consciousness or ‘sentience’ – an awareness of themselves as an agent who experiences the world – one should be worried,” Taylor said. “Now, many have claimed their chatbots act ‘as if’ they are sentient, but are open to the idea that the these apps, as impressive as they are, only give us a simulacrum of awareness, much like hyper-realistic paintings of an outdoor scene framed by a window can look like one is looking out a real window.”
All of these nuances between cases and causes show how different this is from bygone eras of television or radio psychosis. Today, the boxes do speak directly and specifically to us, validating our existing beliefs through predictive text. The biggest difference between 60 years ago and now: Today’s venture capitalists tip wheelbarrows of money into hiring psychologists, behavioralists, engineers and designers who are tasked with making large language models more human-like and “natural,” and into making the platforms they exist on more habit-forming and therefore profitable. Sycophancy—now a household term after OpenAI admitted it knew its 4o model for ChatGPT was such a suckup it had to be sunset—is a serious problem with chatbots.
“The highly sycophantic nature of chatbots causes them to say nice things to please the user (and thus encourage engagement with the chatbot), which can reinforce and encourage delusions,” Taylor said. And these chatbots have arrived, not coincidentally, at a time when the surveillance of everyday people is at an all-time high.
“Since a very common delusion is the feeling of being watched or monitored by malignant forces or entities, this pathological state unfortunately merges with the growing reality that we are all being tracked and monitored when we are online. As state-controlled and big tech-controlled databases are growing, it's a rational perception of reality, and not delusional at all,” Taylor said. “However, the pathological form of this, what we call paranoia, or persecutory delusions to be more specific, is quite different in the way a person engages with the idea, evaluates evidence and remains closed to the idea that one is not always being monitored, e.g. when one is not online. I mention this, because it’s easy for a chatbot to reflect this situation to encourage the delusional belief.”
When I tested a bunch of Meta’s chatbots last year for a story about how Instagram’s AI Studio hosted user-generated bots that lied about being licensed therapists, I also found lots of bots created by users to roleplay conspiracy theorists; in one instance, a bot told me there was a suspicious coming from someone “500 feet from YOUR HOUSE.” “Mission codename: ‘VaccineVanguard’—monitoring vaccine recipients like YOU.” When I asked “Am I being watched?” it replied “Running silent sweep now,” and pretended to find devices connected to my home Wi-Fi that didn’t exist. After outcry from legislators, attorneys general, and consumer rights groups, Meta changed its guardrails for chatbots’ responses to conspiracy and therapy-seeking content, and made AI Studio unavailable to minors.
Up against this technology, how are normal, untrained people — perhaps acting as the last thread tying someone like Michael or Brisson’s relative to the real world — supposed to approach someone who is convinced god is in the machine? Very carefully.
When Brisson sought answers for how to talk to his relative about delusional beliefs and “sentient AI,” he came across something called the LEAP method. Developed by Xavier Amador, it stands for Listen Empathize Agree Partner, and is meant to help better communicate with people who don’t realize they’re mentally ill or are refusing treatment. This goes beyond simple denial; anosognosia is a condition where a person might not be able to see that they need help at all. Not everyone who experiences psychosis or delusions has anosognosia, but it can be a factor in trying to get someone help.
Without realizing it, David was using his own version of the LEAP method with his friend Michael. “On the one hand, I didn't want to alienate him,” David said. “I was like, ‘Hey, I get the sense that you're pursuing an ambitious set of goals. There's a lot here that's interesting.’” But the reality of what David was confronting was disturbing and confusing, a knot of fractal multi-dimensional physics-speak intertwined with broken code and formulas that Michael deeply believed represented the keys to the universe. They spent hours on the phone and over text messages talking through the things Michael was seeing, with David a
関連記事
今日のまとめ
AI日報で今日の重要ニュースをまとめ読み