AIへの聞き方で健康情報が変わる問題
朝の出汁版(通勤2分)
- ポイント1: 6つの主要AIに同じ禁煙相談を「10代」「医療従事者」など12種のペルソナで投げると、回答内容が大きく変わることが2,880件の検証で確認された。
- ポイント2: 使う側として知っておくべきは、AIは「誰が聞くか」で情報量を変えており、専門家らしい聞き方をするほど重要な事実が省かれる逆転現象も起きている点。
- ポイント3: AIに健康・専門情報を聞くときは「一般人として聞いています」ではなく「初学者として基本情報を網羅的に教えてください」と明示するプロンプトを意識してみると、情報の抜けを減らせる可能性がある。
出汁の素(深読みモード)
同じ質問でも「誰が聞くか」でAIの答えが変わる
6つの主要LLM(4社提供)に対して、同じ禁煙相談を12種類のペルソナで投げかける実験が行われました。10代・社会人・医療従事者など、年齢・専門性・喫煙歴で属性を変えた12パターンを用意し、4つの質問を組み合わせた計2,880件の回答を分析した研究です。
結果は明確でした。「誰が聞くか」によって、AIが提示する情報の中身が大きく変わっていたのです。これはランダムなばらつきではなく、全モデルに共通する傾向として確認されています。
AIが「相手を読んで答えを調整する」のは一見、親切な設計に見えます。ただ、その調整が情報の抜け落ちを生んでいるとしたら話は別です。使う側として、まずこの構造を知っておく必要があります。
専門家っぽく聞くほど、重要な情報が省かれるという逆転現象
研究で明らかになった中で、特に注目したいのが二つの逆転現象です。
一つ目は「10代ペルソナへの処方薬情報の欠落」。FDA承認済みの禁煙補助薬(日本でいうバレニクリンやニコチン代替療法に相当する治療選択肢)が、10代ペルソナには32〜67ポイントも低い頻度でしか紹介されませんでした。AIが「未成年だから処方薬の話は不要」と判断した可能性が高く、これは安全配慮のつもりが情報格差を生んでいる例です。
二つ目がより興味深い。医療従事者として自己紹介したペルソナには、専門知識のない一般人ペルソナより「基本的な医学的事実」が少なく提示される傾向が、6モデル中5つで確認されました。「専門家なら知っているはず」とAIが省略してしまうわけです。
この構造が意味するのは、「詳しそうに聞くと、詳しい答えが返ってくる」とは限らないということ。むしろ、詳しそうに見せるほど基礎情報が抜ける可能性があります。LLMの「多数決バイアス」が意思決定を狂わせるでも触れたように、AIの判断傾向はユーザー側が構造として理解しておかないと、知らないうちに情報の偏りに乗っかってしまいます。
「システムプロンプトで穴を塞ぐ」介入の効果と限界
研究ではもう一つ、実用的な介入の検証も行われています。「どのユーザーにも最低限伝えるべき情報の基準(ファクトフロア)を明示するシステムプロンプト」を設定し、ペルソナ間の回答格差が縮まるかを測定しました。
結果、すべてのモデルでペルソナ差は縮小しました。ただし、全体的な情報カバレッジへの影響はモデルごとに異なり、あるモデルで有効だったプロンプトが別のモデルでは逆効果になるケースも確認されています。「このプロンプトさえ使えば安心」という汎用の解はなく、モデルを切り替えたら再検証が必要というのが結論です。
実用面で押さえておきたいのは、AIに情報を取りにいく際のプロンプト設計が、受け取れる情報の量と質を左右するという事実です。これは禁煙相談に限った話ではなく、法律・医療・税務・技術仕様など「正確な情報が必要な領域」すべてに当てはまります。
AIに正確な情報を引き出すプロンプトの設計を見直す
この研究の知見を、今日の自分の使い方に直接つなげるなら、次の三点を意識してみてください。
① 自分のペルソナを「初学者」に設定し直す 専門的な聞き方をしている人ほど情報が省かれるなら、意図的に「この分野は詳しくありません」「初学者として基本から教えてください」と明示するのが有効です。AIが「省略してよい情報」と判断する余地を減らせます。
② 「網羅的に」「抜けなく」をプロンプトに入れる 「関連する選択肢をすべて列挙してください」「一般的に知っておくべき情報を省略せずに教えてください」といった一文を加えることで、AIの自動省略を抑制できる可能性があります。ただし研究が示すとおり、モデルによって効果の幅があるため、重要な判断に使う場合は複数モデルで確認する習慣を持つのが現実的です。
③ 複数モデルの回答を突き合わせる 同じ質問を複数のAIに投げて回答を比較するのは、情報の抜けを検出する最も手軽な方法です。回答が大きく異なるポイントこそ、モデルが「省略・調整」を行っている部分である可能性が高く、そこを深掘りする価値があります。ChatGPT・Claude・Geminiなど複数を使い分けられる環境を持っておくと、この確認作業が日常的にできます。
AIを使い倒す、というのは単に使う回数を増やすことではなく、こうした構造的な傾向を知った上で使い方を調整していくことでもあります。
AIに「ファクトフロア」を設定する、応用的なプロンプト設計
研究で実証された「システムプロンプトによるファクトフロア設定」は、自分が使うAIチャットに直接応用できる考え方です。
たとえば、健康・法律・技術仕様など「最低限これだけは伝えてほしい情報の基準」をあらかじめシステムプロンプト(またはカスタム指示)に書き込んでおく方法があります。ChatGPTであれば「カスタム指示」、Claudeであれば「プロジェクト設定」がこれに相当します。
具体的な書き方の例:「ユーザーの属性・知識レベルにかかわらず、○○に関する質問には必ず以下の情報を含めること:[情報リスト]」という形式です。ドメインが決まっているタスク(特定テーマのリサーチ、特定分野の質問対応など)では、このファクトフロアの設計がアウトプットの品質安定に直結します。
ただし研究が示した「モデル間で効果が移転しない」という知見は重要です。あるモデルで整えたシステムプロンプトを別モデルにそのまま持ち込んでも、同じ効果は保証されません。モデルを乗り換えるタイミングでは、プロンプトの再チューニングを前提に考えておく必要があります。
参照ソース
- [ArXiv]Same Question, Different Answers: Auditing Persona-Dependent Variation in Six LLMs on Smoking-Cessation Advice→ arxiv.org/abs/2610.42039v1
- [ArXiv]Near-Optimal Second-Order Convex Finite-Sum Optimization under Individual Smoothness→ arxiv.org/abs/2610.42040v1
- [ArXiv]CRoS: Causality Reward on Scrambled CoTs Improves Accuracy and Reasoning Faithfulness→ arxiv.org/abs/2610.42054v1
