Claudeで同じ質問なのに違う答えが返ってくる理由

ざっくり言うと

イメージ

正確には

Anthropicの公式ドキュメント「Glossary(用語集)」には、Claudeのようなモデルが確率分布から次の単語(トークン)をサンプリングする仕組みになっていると書かれています。具体的にはtemperature(温度)というパラメーターで「ランダムさの度合い」をコントロールしていて、低くすると一番ありそうな単語が選ばれやすく、高くすると意外な単語も選ばれやすくなります。

そして同じ公式ドキュメントには、temperatureを0にしても、結果は完全には同じにならないと明記されています。つまり「同じ質問に違う答えが返る」のは、サイコロを内蔵している以上、原理的に避けられない現象。ここからは、その揺らぎがどこから来るのかを順番に見ていきます。

1. 「次の単語を確率で選ぶ」=毎回サイコロを振っている

2. モデルやプランによっても答えが変わる

注意

Claudeには複数のモデルがあり、プランによって使えるモデルが違います。Anthropic公式の情報では、

無料プラン: Haiku と Sonnet が使える
ProプランやMaxプラン: 上記に加えて Opus も使える

と整理されています(プランや提供モデルは時期によって変わるので、最新はClaude公式の料金ページで確認してください)。

そして同じプランの中でも、Anthropicは新しいモデルを継続的にリリースしています。「昨日と今日で答えのテイストが違う」と感じたら、裏でモデルが更新された可能性もあるわけです。

→ 重要な作業をするときは、画面上のモデル名をチェックしてから始めると、揺らぎの原因を1つ減らせます。

3. 同じチャット内の「文脈」で答えが変わる

4. 「メモリ」と「プロジェクト」も効いている

補足

Anthropic公式ヘルプ「Use Claude's chat search and memory to build on previous context」では、Claudeに過去のチャットを参照する機能やメモリ機能があると説明されています。さらに「How can I create and manage projects?」によれば、プロジェクト機能を使うと、そのプロジェクト内のチャットでだけ共有される専用の記憶領域を持てる、とされています。

ざっくり言うと:

メモリ: チャットをまたいで「あなたについて覚えておくこと」を保持する
プロジェクト: プロジェクトごとに別々の記憶を持たせて、文脈を分けられる

つまり同じ質問でも、メモリやどのプロジェクトで聞いたかによって、返ってくる答えが変わることがあるわけです。「人によって違う答えが返る」のは、Claudeがその人向けに最適化されている証拠でもあります。