AIの回答が悪くなった気がするとき：プラン・モデル・指示のどこを疑うか

最初に「再現用メモ」を作る

「悪くなった気がする」は感覚なので、先に比べられる形にします。以下をコピーして埋めてください。

【再現用メモ】
日付:
サービス名/プラン名:
画面上で選んでいるモデル・思考設定(表示のまま書く):
使った場所(Web/アプリ/API/ブラウザ拡張など):
会話の長さ(往復数。添付ファイルの有無):
記憶・過去チャット参照・カスタム指示:オン/オフ/不明
プロジェクトや共有指示の有無:

【良かったときの依頼文】(コピペ)
【良かったときの回答の特徴】(3点まで。例:根拠を示す、表で出す)

【悪いと感じた依頼文】(コピペ)
【悪いと感じた点】(具体的に。例:前提を無視した、長さが半分、誤りがある)

【切り分け結果】
A 新規チャット+同じ依頼文:
B モデル/思考設定を揃えた場合:
C 記憶・履歴参照をオフにした場合:
D 指示を短く書き直した場合:

コツは、「悪い」の中身を1行で言えるようにすることです。「浅い」「長さが足りない」「指示を忘れる」「事実が間違う」は原因が違います。たとえば指示を忘れるなら会話の長さや指示の競合、浅いなら思考設定の可能性を先に見ます。

順に潰すチェックリスト

手順1:新しいチャットで同じ依頼文を送る

古い会話から切り離すための手順です。依頼文は良かったときのものをそのまま使い、機密情報が含まれる場合は架空のデータに置き換えます。

• 新しいチャットで改善する → 会話の長さ、またはその会話内の古い指示が有力です。手順3と5へ。
• 新しいチャットでも悪い → 手順2と4へ。

手順2:モデルと思考設定を確認する

ChatGPTのヘルプでは、モデルメニューの中に思考の深さを選ぶ項目(即答寄りの「Instant」から、より長く考える段階まで)があり、プランやワークスペースの設定によって選べる範囲が違うと説明されています。また、Thinkingの利用上限に達したときは、別の利用可能なモデルで続けることがあるとされています。詳細はOpenAIヘルプのChatGPTモデル解説で確認できます。

つまり、「先週は深く考えてくれたのに今日は浅い」というとき、モデルの劣化ではなく、選択中のモデル・思考設定が以前と違う、Thinkingの上限に達して別モデルに移ったといった可能性があります。確認は次の通りです。

• 画面で選択中のモデル・思考設定をメモに書き写す
• 良かったときの設定に手動で揃えて同じ依頼を送る(選べない場合は、プラン・上限・段階的な提供状況・ワークスペースの権限を確認します)
• 上限到達の表示や案内が出ていないか見る

Claudeの場合、ヘルプは、使用量の上限(会話全体でどれだけ使えるか)と、長さの上限(1回の会話をどこまで長くできるか)を分けています。また使用量を節約する案として、不要な拡張思考をオフにする、努力レベル(effort)を下げるといった設定が挙げられています。節約のための設定を以前に変えたまま忘れていないかも、見直す価値があります。

手順3:会話の長さを疑う

Claudeの有料プランでコード実行が有効な場合、会話が文脈の上限に近づくと、古いメッセージが要約されて続きます。全履歴は参照できるとされていますが、要約が入る以上、細部の指示は元の文面そのままでは扱われないと考えておくのが安全です。コンテキストの大きさはモデルによって異なります。さらに、長い会話は使用量も多く消費するため、ヘルプも長い会話では新しい会話に移ることを勧めています。

実用的な対処は次のとおりです。

• 区切りのよいところで「ここまでの決定事項を10行で要約して」と頼み、その要約を新しいチャットの冒頭に貼る
• 絶対に守らせたい条件は、最後の依頼文にもう一度書く

手順4:記憶・過去チャット・指示の持ち込みを切る

ChatGPTのメモリ機能は、過去の会話、保存したメモリ、カスタム指示、ライブラリのファイル、接続したアプリの内容などを材料にできます。個人化された回答では、回答の下にソースが表示されて、何が影響したか確認できる場合があります。切り分けには、一時チャットを使うか、過去チャットの参照だけをオフにする方法が使えます。

Claudeでは、記憶の設定で一時停止にする、チャット単位で記憶を無効にする、シークレットチャットを使う、といった方法があります。プロジェクトには独自の記憶があり、プロジェクト内ではその記憶と、プロジェクト外のチャットの記憶が使われる点に注意してください。

古い好みが残っていると、「簡潔に」と過去に言った結果、今回は詳しく欲しいのに短く返る、といったズレが起こり得ます。記憶を切ると改善するなら、記憶の内容を見直して古い項目を直します。

手順5:指示文を短く書き直す

ここまでで原因が見つからないときは、依頼文自体を点検します。

次の依頼を、1つの目的・入力・出力形式・守る条件に分けて書き直してください。
矛盾している条件があれば指摘してください。回答はまだ作らないでください。

【元の依頼文】
(ここに貼る)

AI自身に整理させたうえで、人が条件の取捨選択をします。条件が10個あって互いに衝突している依頼は、モデルを変えても安定しません。

判断表

• 改善、設定を揃えた：—、記憶オフ：—、起きやすい原因：会話の長さ、古い指示、次の行動：要約を持って新チャットへ
• 悪いまま、設定を揃えた：改善、記憶オフ：—、起きやすい原因：モデル・思考設定の違い、次の行動：設定を固定してメモに残す
• 悪いまま、設定を揃えた：悪いまま、記憶オフ：改善、起きやすい原因：記憶・履歴・カスタム指示、次の行動：記憶の内容を整理する
• 悪いまま、設定を揃えた：悪いまま、記憶オフ：悪いまま、起きやすい原因：指示文、課題との相性、次の行動：依頼を分割する。別サービスでも同じ依頼を試す
• 設定が選べない、設定を揃えた：—、記憶オフ：—、起きやすい原因：プラン・上限の制約、次の行動：上限表示とプラン説明を確認

最後の行は、「選べないことと、品質が落ちたことを混同しない」ための行です。

課金や乗り換えを決める前に

プラン変更や乗り換えは、手順1〜5を一周してからにします。判断材料として次の3つを持っておくと、感覚ではなく比較になります。

• 同じ3本の依頼(日常で使う種類のもの)を、新規チャット・記憶オフで実行した結果
• 各回の使用モデル・思考設定
• 「合格」の基準(例:誤りが0件、指定形式を守る、根拠を示す)

説明用の例(実測ではありません)

次の記入例は、書き方を示すための架空のものです。

日付: 10/28
サービス/プラン: 〇〇(有料個人プラン)
選択中の設定: 自動
会話の長さ: 40往復
良かった依頼: 会議メモ(ダミー)を、決定事項/宿題/未決の3表にまとめて
悪い点: 未決の表が消え、宿題が決定事項に混ざった
A 新規チャット: 3表とも出た → 会話の長さが疑わしい
B 設定を高めに揃えた: 同じ
対処: 40往復目で要約を作り、新チャットで再開。以後は20往復で区切る

この例では、原因は会話の長さと仮に判断しています。実際には別の結果になることもあるため、自分のメモで比較してください。

比較の結果、新規チャット・設定同一・記憶オフでも一貫して悪い場合に初めて、別のモデルやサービスを試す意味が出ます。そのときも、同じ3本の依頼と同じ合格基準で比べると、乗り換え後の評価がぶれません。