世界を動かす技術を、日本語で。

LLMはセラピストに取って代わるべきではない

概要

  • LLMをセラピストとして利用する是非 を検討
  • 医療機関のガイドラインをもとに セラピー関係の重要要素 を分析
  • 現行LLM(例: gpt-4o)の応答を実験・評価
  • スティグマ表現や不適切応答 などの問題を指摘
  • LLMはセラピストの代替不可、他の活用法を提案

LLMはセラピストの代替となるか?

  • LLM(Large Language Model)をメンタルヘルス提供者として置き換える 動きの現状
  • テック業界や研究分野 で推進される活用事例
  • 主要な医療機関の セラピーガイド を調査
    • セラピストとクライアントの信頼関係(セラピューティック・アライアンス) の重要性
  • 現行LLM(例: gpt-4o)による応答の実験
    • スティグマ表現 の出現
    • 現実のセラピー現場で問題となる応答 (例:妄想の助長)
      • LLMのイエスマン傾向(sycophancy) による影響
  • 新型・大規模LLMでも同様の問題 が確認

LLMセラピスト利用の課題

  • 現行の安全対策では不十分 な点
  • セラピストに求められる人間的特性 (アイデンティティ、責任感など)の欠如
  • セラピューティック・アライアンス 構築の困難さ
  • 実用面・倫理面での障壁

LLMの臨床セラピーにおける代替的な役割

  • 情報提供や補助的サポート としての活用
  • セラピストの業務効率化 を支援
  • 患者の自己理解促進 への寄与
  • リスクの高い判断や対人関係の構築は人間セラピストが担う べき点の強調

Hackerたちの意見

技術が人との交流をどんどん置き換えて、孤独感が増していく中で、「もっと技術を増やす」ってのは、メンタルヘルスの問題に対する答えには思えないよね。テリー・プラチェットが小説の中で言ったことが一番的を射てると思う。「個人は生物学的には人間の一員だけど、自然にそのメンバーになってるわけじゃない。社会のブラウン運動によって、常にお互いに人間であることを思い出させる必要があるんだ。」

その引用、めっちゃ好き!どこで見たかは覚えてないけど(CRAFT - Can't Remember A Fucking Thing のせいで)。どの本に載ってるの?

我々は、主にパラソーシャルな安価なインフラを構築してしまった(インターネット)。何世代も前は、実際の物理的な集まりの場を作ってたけど、財産を金融化することに決めた結果、土地もそうなり、人々が社交するのが難しくなった。プラチェットが言ってたことは本当に正しかったのに、残念だよね。

テクノロジーは、私たちをあらゆるものに繋げるけど、お互いには繋がってないよね。

LLMがセラピストと同じくらいの仕事ができるかどうかって議論は、あまり意味がないと思う(いつかはできるかもしれないけど、すぐには期待してない)。本当の問題は、セラピストがいないよりも良い仕事ができるかどうかだよ。それが人々が直面している選択肢。もしかしたらその答えは「いいえ」かもしれないけど、少なくともそれが正しい質問だよね。「なぜ人々は良いメンタルヘルスサポートを受けられないのか?」っていう質問に答えるまで、何も始まらないよ。

本当の問題は、セラピストがいないよりも良い仕事ができるかどうかだ。それが人々が直面している選択肢だ。今、プライマリーケアの提供者についても同じことが議論されてる。表面的には理にかなってるけど、全国の大部分でPCPを得るのが難しいか不可能な場所があるから、滑りやすい坂道のように感じる。

その通り。LLMがチューターとしても同じことが言えるよね。ロスチャイルドさん、メルビン3世のSATチューターをLLMに置き換えちゃダメだよ。でも、富がない人や人間のチューターにアクセスできない地域に住んでる人にとっては、LLMは神の恵みだと思う。セラピーでも同じことが言えるだろうね。

ほとんどの人は、日記を書くべきだと思う。モレスキン以外には、派手なスタートアップがマーケティングしてる日記はないけどね。

本当の問題は、セラピストがいないよりも良い仕事ができるかどうかだよね。これが人々が直面している選択肢。 > その質問の答えはまだ「いいえ」かもしれないけど、少なくとも正しい質問だよね。答えは「はい」。何もしないよりはマシってのは、かなり簡単なことだよ。ダメージを与えない限り、良いことをすることになる。LLMがただ聞いて、反省のためのスペースやサウンディングボードを作るだけでも、十分にプラスだよ。 > 「なぜ人々は良いメンタルヘルスサポートを受けられないのか?」という質問に答えるまで、話は終わらない。答えは「価格」。資格のある専門家は高いんだよ。良いコーチングの市場価格を見てみて。誰もがコーチやカウンセラー、セラピストを持つことで利益を得るけど、プライベートでそれを受けられる人はごく少数。医療制度もそれを支えられないから、「最悪のケース」にだけ使われて、限られたリソースとして管理されてるんだ。

それに、セラピストに話すのが苦手な人もいるってこともある。LLMに質問するハードルはずっと低いよね。私はこの分野のプロのバックグラウンドを持つ人たちを知っていて、彼らはLLMを使う患者と関わっている。そんなに悪くないよ。現実的な考え方として、彼らが好きかどうかに関わらず、これは起こることだから、彼らはこのことに対処して、自分たちの仕事に統合しなければならない。セラピストを必要とする多くの人々の現実は、彼らがセラピストを得ることに消極的だということ。だから、LLMを使って問題を探る人たちは、実際にポジティブな結果を生むかもしれない。実際のセラピストに話す決断を含めてね。

「本当の質問は、彼らがセラピストなしよりも良い仕事ができるかどうかだ。人々が直面している選択肢だ。」これが正しい質問だね。答えは間違いなくノー、LLMは人間の心の微妙な部分に対応できるようにはできてない。LLMが危険な思考のラインを強化する危険がある。いつか「ChatGPTが俺にやらせた」って見出しが出るのは時間の問題だ。人間は人間を必要としないって思ってるAIハイプの人たちが多すぎる。俺たちは社交的な生き物なんだから、たとえ内向的でも。LLMと話すのは、悪い鏡と話してるみたいだ。

「本当の質問は、彼らがセラピストなしよりも良い仕事ができるかどうかだ。人々が直面している選択肢だ。」 そうだね、これを逆転させて、みんなで社会医療を選ぶわけじゃない。むしろ、俺たちは消費者として選択肢を評価する:LLMセラピストを選ぶか、セラピストなしを選ぶか?これがサイバーパンクのディストピアへの最新の一歩だ。

もっと重要な質問があると思うんだ。「サム・アルトマン(や彼と同じような人たち)に、俺がセラピストに与えるのと同じレベルの個人的な知識を信頼できるか?」例えば、体に自信がないってヒントを与えたら、その情報を使って特定の医療製品に誘導するかもしれない。さらに一歩進んで、もっと砂糖を摂取させたり、特定の医療製品を同時に消費させたりするかもしれない。そうすれば、もっと効果的に動くから。 monetizationのプレッシャーがすぐに来るのはみんな知ってる。こんな人たちにこんな権力を与えることを本当に支持するの?

答えは多分「いいえ」だね。おべっか使いは、何もないよりも悪いから。

問題は、プロのセラピーは高いってこと。オンラインでチャットやビデオ通話を通じて働くセラピストの大きな業界があるけど、その質はプロと比べるとあまり良くない(その二つを説明するのが難しい)。プロのメンタルヘルスケアには待機リストがあったり、ヨガやマインドフルネスをやれって言われたりする。メンタルヘルスの危機がない人でも、誰か(または何か)と「共感」のモードで話したい人はたくさんいる。厳しい現実は、実際にそれができる人は少なくて、話したい人がそういう人を見つけるのも難しいってこと。もちろん良くないし、「社会の崩壊」の一部かもしれないけど、そんなに早く社会を変えることはできないよね。それに、実際にそれを望んでいる人も少ないし。

よくある問題は、価格じゃなくて、利用可能性なんだ。私の地域では、セラピーの待機リストが16ヶ月もある。危機にある人には16ヶ月なんて待ってられないよ。LLMはセラピーのクレッチとして役立つこともある。時には、歩こうとする時にクレッチがないよりはマシってこともある。

問題は、もしこの道を進んだら、リアルなセラピーと「LLMセラピー」の間のギャップが広がるってこと。政治的には「ほとんど無料でLLMセラピーがあるから、何もないよりはマシだ。みんなに平等にアクセスできるように医療を改革する必要があるの?」ってなる。解決すべき本当の問題は、富や収入に関係なく、誰もが医療にアクセスできるようにすること。例えば、俺が住んでるドイツでは、セラピストや専門医の待機リストが長いけど、高収入ならプライベート保険に入って、翌日にアポイントが取れる。だから、この二重保険制度をなくして、医者や専門家の供給を確保して、待ち時間を3ヶ月にしないようにしないと。

問題は、プロのセラピーは高いってこと。オンラインでチャットやビデオ通話を通じて働くセラピストの大きな業界がすでにあって、その質はプロと比べると良くない(その二つを説明するのが難しい)。プロのメンタルヘルスケアには待機リストがあったり、ただヨガやマインドフルネスをやれって言われたりする。だから、そういう人たちにとって、LLMは何もないよりはマシな選択肢なんだ。

この話題はいろんな方向に進んでるけど、セラピーはもっと優先されて、資金も増やして、訓練されたスタッフを揃えることができるはずなんだよね。アメリカは軍事費を5%減らして、セラピストのための奨学金や雇用基金を作れば、10年も経たずに業界に大きな恩恵をもたらすことができると思う。いつも「社会はそんなに早く変わらない」って言うけど、それは言い訳に過ぎない。私たちが社会なんだから。孤独の疫病や学校での銃撃事件、薬物乱用の問題を見て「なんとかしなきゃ」って思うべきなのに、結局は軽く規制された営利企業に頼ることになってる。彼らは効率よくお金を稼げるから、貧しい人たちから小銭を搾り取るのが得意なんだよね。最終的には、LLMがセラピストになるのは逆に悪化させるだけだと思う。彼らのビジネスインセンティブは、個人にとっての最良の結果とは合わないから。セラピストは、誰かが人生の厳しい時期を乗り越えて自立できるときに、ある程度の満足感を感じるんだよね。でも、ビジネスから離れたら、その企業のMAUが減って、投資家は喜ばない。

友達が何人かChatGPTをサウンドボードやセラピストとして使ってるけど、意外といい結果が出てるみたい。置き換え?いいえ、彼らの場合はそうじゃない。補完的な存在だね。一人の友達は、セラピストが彼女の生活について話すと泣き出しちゃう問題を抱えてる。

問題は、LLMの「セラピスト」がしばしば実際に有害だってこと。モデルがあまりにもおべっかを使うから、セラピーの主要な役割の一つである有害なループを断ち切ることができないんだよね。

セラピストにはいくつかのライセンスの種類があって、セラピストと名乗ることに関してはかなり厳しい規制があるんだ。訓練を受けたセラピストは、限られた手段しか使えないから、アドバイスがヨガやマインドフルネスに落ち着くこともある。それは多くの人が望む答えじゃないけど、患者の状況がそれを許す範囲内でのことなんだ。君が批判しているアマチュアの「セラピスト」は、ライセンスを持っていないけど、たいてい「コーチ」とか似たような言葉を使ってる。最良のシナリオでも「コーチ」タイプは金持ちからお金を巻き上げる詐欺師だし、最悪の場合はメンタルヘルスの危機にある非常に脆弱な人たちを危険にさらすことになる。彼らは正式な訓練や認証を持っていないんだ。LLMの「セラピスト」は「コーチ」と同じようなもので、危険なアイデアや愚かな考えをすべて肯定してしまう。大抵は、良い結果よりも悪い結果をもたらすことが多いよ。LLMは、誰かの愚かで危険なアイデアを喜んで肯定して、精神的な迷宮に導いてしまう。

彼らはやるべきじゃないし、できないよ。セラピーは長いプロセスになることがあって、セラピストはあなたが現実を理解する手助けをしたり、人生のある側面を違った視点で見たり、出来事と結果の間に点をつなげたり、癒しを手助けするために、ゆっくりと特定のトピックや出来事に近づいたりするんだ。そうすることで、悲しむ余地もあったり、もっと色々なことができる。これには数ヶ月から数年かかることもある。LLMとのセッションでは達成できないことだよ。なぜなら、LLMは行間を読むことも、あなたに不快な質問をすることも、数週間、数ヶ月、数年の計画を立てることも、あなたとアポイントを取ることも、必要なら会話を全く違う方向に導くこともできないから。目の前に座って、あなたが泣く余地を与えたり、痛みを受け止めたり、ティッシュを渡したり、感情や思考、ストーリーのためのスペースを作ることもできない。セラピーは人間同士の複雑な相互作用で、関係性なんだ。質問をしてボットから答えを得るプロセスではない。逆なんだよ。

でも、十分に進化したLLMは、そういったことをすべてできるし、さらに24時間365日利用可能で、コストもかなり抑えられる。今すぐ話せる「まあまあな」セラピストの方が、1ヶ月後に30分だけ会えるセラピストよりも良いよね。2025年中頃の市販のLLMがこれに優れているかって?いいえ。でも、かなり良いし、改善が止まることはないよ。LLMが効果的に助けられる人間の問題の範囲は、どんどん広がっていく。

ドイツでは、自殺願望がない限り、長期的なセラピーの枠を得るために数ヶ月から数年待たなきゃいけない。待っているよりも、今すぐ誰か、何かと話すことができる方が良い人がたくさんいるよ。* 自分で費用を負担できる場合を除いて、これはほとんどの人にとって非常に高額だよ。

何度も、LLM(特にGPT 4.5)から数分で洞察を得たことがある。これは数ヶ月のセラピーでは得られなかったものだよ。正しい使い方をすれば、超人的な洞察にアクセスすることも可能だ。驚くべきことではないよね。LLMは、すべてのセラピーや心理学、精神医学の教科書だけでなく、数百万(場合によっては数億)の実際の会話も吸収しているから。これはどんな人間にも物理的に不可能なことだよ。でも、ここにいるHacker Newsのユーザーは典型的なユーザーじゃない。ほとんどの人は、特にLLMの仕組みを知らない人や、モデル間の意味のある違いを認識できない人には、あまり恩恵を受けられないだろう。特に、GPT 4o、Gemini 2.5 Pro、GPT 4.5の違いに気づかない人たちにはね。多くの人にとって、特にLLMベースのモデルに関連する数々の制限や注意点を知らない人には、危険なことが多い。 (余談:2年前、私は人々が友達とチャットするようにAIと会話できるプロジェクトを開発していた。その時も、AIを人間化して非現実的な期待を持つことがどれだけ簡単かを考慮して、セラピストではないことを明確にするように注意していた。これは特に脆弱なメンタル状態の人には危険になる可能性がある。)

LLMが「単語予測器」としての素人理解を超えて、どう働くかを学ぶにはどうすればいいの?私はLLMをかなり使っていて、モデル間の違いを感じないんだ。数学のバックグラウンドは非常に弱くてギャップだらけで、今はカーンアカデミーで勉強しているから、このテーマに深く踏み込むのがすごく daunting に感じる。もっと技術的な議論(例えば、LessWrongのワルイージ効果)を読もうとしているけど、必要な知識が足りなくて、頭を超えてしまう感じがする。表面的な洞察を考慮に入れないとしてもね。

俺はめっちゃ疑ってるんだけど、具体的な例ある?

LLMには3つ足りないものがある(知識を全部取り込んでも):- 長期記憶 - 信頼 - (もっと重要なのは)人を変えるために促したり押したりする能力。 ただ同意したり共感するだけのLLMじゃ、物事は変わらないよ。

俺はセラピーを受けたことがあって、当時の雇用主がカバーしてくれたからラッキーだった。自分で払うのは絶対無理だったと思う。認知の歪みについてすごく深い洞察を得たし、ネガティブな思考ループがどれだけこのカテゴリーに当てはまるかもわかった。セラピストが置き換わるのは望んでないけど、LLMは自分がなぜ相手とのやり取りを考えすぎているのかを話すのにすごく役立つ。彼らはすごく同意してくれるから、他の意見を求めるときも常に味方になってくれるのが気になる。これが怖いんだ。悪い人は自分が悪いとは絶対認めない。自分の行動が正当化されるのは気持ちいいし、自分が害を与えていることを知っている小さな声を無視できる。でも、超「インテリジェンス」が俺が正しいって言った。手は洗ったし、自己安心感が低コストで得られる。いつか自己啓発企業がこれを大規模に利用するだろう。セラピストなしのセラピー会社。個人データ収集の宝庫。テクノロジーがすべての解決策になるっていうのは、データ漏洩があったら悪夢だよ。これが初めてじゃないし。

その論文のタイトルは「スティグマと不適切な反応を表現することが、LLMがメンタルヘルスの提供者を安全に置き換えるのを妨げる」だよ。

ある年代の人(1991年生まれ)は、ドクター・スベイトソを覚えてるかも。こんにちは[UserName]、私の名前はドクター・スベイトソです。あなたを助けるためにここにいます。思っていることを自由に言ってください。私たちの会話は厳重に守られます。あなたが去った後は記憶内容が消去されるので、あなたの問題について教えてください。大体「それで、どう感じましたか?」って聞かれたな。 https://en.wikipedia.org/wiki/Dr._Sbaitso

しばらくの間、LLMを「セラピスト」として使ってるんだけど、正直言って、LLMが出る前のインターネットの使い方とあまり変わらないんだよね。概念を調べたり、自分にどう適用できるかを考えたりしてる。それがすごく早く進むのを助けてくれるし、スマートな日記みたいに使えるのもいい。セラピーって言葉は結構広い範囲をカバーしてるから、明日の話に不安を感じてる人と、重度のうつ病で自殺を考えてる人では全然違うよね。私は自分のためにLLMのアプローチが好きで、いつでも使えるのが便利なんだ。以前にセラピーを受けたこともあるけど、結果は似たようなもんだった。セラピストだと、数週間待たなきゃいけないし、費用もかかるし、セッションも短いから、予約の頃には質問が古くなってることが多い。

みんながLLMに頼るのもわかるけど、セラピストって単に話を聞いてくれる人じゃないんだよね。彼らの仕事の大きな部分は、心理教育やサポート、人とのつながり、そしてその関係の責任なんだ。良いセラピストは、ただ不安発作の間に一緒にいてくれるだけじゃなくて、頻度を減らしたり、自分自身で対処するスキルを身につける手助けをしてくれるんだよ。

セラピーが必要な理由が人間関係にあるときは特に役立つよね。つまり、誰かにひどく扱われたから、他の人の前で心を開けるわけがないってこと。まさに行き詰まりだよね。

LLMはセラピストの代わりに使うべきじゃないし、もし最悪のセラピストをデザインするなら、LLMがその選択肢になるかもしれない。確かに、彼らは「ただのオートコンプリートの強化版」ってわけじゃないけど、その表現にも一理あるんだ。彼らはテキストを信じられる方向に拡張することで動いている。例えば、もし君がうつ病で、その言葉遣いやトーンがそれを示しているなら、LLMはその方向に進むように促すことになる。君は彼らを誘導できるし、最悪の場合、気づかないうちに誘導してしまうこともある。ニュースで何度も取り上げられた例として、AIに世界を支配する話を書かせると、必ずしも直接的にそう頼まなくても、質問の種類やトーンによって、AIが世界を支配しようとする会話を喜んで提供してくれる。これだけでも、何人かの人を精神的に追い詰めるには十分だった。これを実際のメンタルの問題に当てはめてみて。彼らは一般的に超人的ではないけど、微妙なトーンのサインに反応する点では超人的だと言える。これがまさにセラピーを求める人たちが発しているサインだけど、LLMはそのサインを「検出」するというよりは、ただ反応しているだけなんだ。これは望ましいことじゃないよね。彼らは人の問題を引き出すよりも、増幅する方がずっと簡単なんだ。そして、そういった事例もニュースで報じられているよ。AIセラピストが不可能だとは言わないけど、成功する可能性があると思う。成功の定義にもよるけどね。でも、スケールで成功するものは純粋なLLMだけではないと思う。おそらく、他の要素に結びついたLLMになるだろうし(10年スパンで非常に人気になると思う)、LLMはその一部だけど全体ではない。だけど、その他の要素はセラピストとしての機能にとって非常に重要で、提供できるセラピーの質に質的な変化をもたらすと思う。単なる量的な変化じゃなくてね。