コスト / COST
同じ入力をより安く読み取ります。
代表例:キャッシュヒットした入力単価は通常入力の10%
先頭はそのまま。新しい情報だけを後ろに追加。
* GPT-5.6・Claude・Geminiの公式価格に基づく代表例 · † 500件のエージェントセッションを対象としたarXiv研究の最大値。戦略によっては改善しない、または遅くなる場合があります
仕組み / THE MECHANISM
プロンプト/コンテキストキャッシュは答えそのものを記憶しません。回答前のプリフィル段階で、一致する先頭部分の計算を再利用します。キャッシュが有効なら、新しい末尾だけを読みます。
入力全体を読み、内部の計算結果を作ります。
同じ先頭部分の再計算を省きます。
回答を1トークンずつ生成します。
キャッシュが主に削減するのは入力のプリフィルです。出力トークンのコストと生成速度は別です。
INTERACTIVE LAB 01
変更位置によって再利用できる範囲が変わります。
先頭の3ブロックがそのまま再利用されます。
一般的なプレフィックスキャッシュでは、変更箇所以降の再利用可能な範囲が小さくなります。
効果 / WHY IT MATTERS
条件とメリットはプロバイダーやモデルによって異なります。以下の90%は代表的な入力価格で、リクエスト全体の削減率ではありません。
コスト / COST
代表例:キャッシュヒットした入力単価は通常入力の10%
速度 / SPEED
効果はプレフィックス長やインフラによって異なります
処理量 / THROUGHPUT
Claude APIでは多くのモデルでキャッシュ読み取りがITPMから除外されます
INTERACTIVE LAB 02
キャッシュ読み取り単価を通常入力の10%とした単純モデルです。書き込み・保存(TTL)・出力コストは含みません。
全額課金トークン換算のターンあたり有効入力負荷
入力コスト指数28 / 100
概算削減率72%
ヒット率が高くても、コンテキストが大きすぎると約5.7倍重くなります。
私たちのOrca利用記録
ORCA HQ · 2026.07.20—07.27 · LOCAL USAGE LOG
Orcaがローカルで集計したHQ作業記録のうち、パスを直接確認できた207セッションを分析しました。数値はusageフィールドの合計で、請求記録がないためコストは推定していません。
WHAT THE LOG SHOWS
合計22.01億トークンのうち、21.61億がcache read、3,882万がcache write、79.9万が新規入力でした。
キャッシュ読み取りログ測定
21.61億98.20%キャッシュ書き込みログ測定
3,882万1.76%新規入力ログ測定
79.9万0.04%再利用率は高い一方、絶対コンテキストも大きい
THREE REAL RUNS
いずれもClaude Opus 5を使用したOrcaベンチマークです。合計値は丸めています。
観測:読み取り量は書き込み量の約460倍でした。
観測:入力関連トークンの大部分が再利用されました。
観測:長文作業でも高い再利用率が見られました。
3つの実行はすべて、同じ目的の作業を短時間に1セッションで連続していました。
注意:強い相関パターンですが、個々のキャッシュ書き込み原因を直接分類したものではありません。実践 / THE PLAYBOOK
キャッシュ最適化は、セッションの始め方、続け方、整理の仕方の問題です。
一般的なチャットボット / PRESCRIPTION
説明と資料は最初に一度まとめます。
同じ作業は同じスレッドで続けます。
長文書は変更点だけを伝えます。
CACHE & CONTEXT HABITS
WHAT TO MEASURE
実際にヒットしているか?
セッションが重すぎないか?
1つの結果にいくら使うか?
最初のトークンは速くなったか?
自分のワークロードの基準線と傾向が、普遍的な理想値より重要です。
GPTの見解 / A MODEL'S TAKE
キャッシュ最適化はプロンプトの小技ではなく、情報構造の設計です。
ヒット率は有用ですが、100%が目標ではありません。変わらない事実を安定して再利用し、今必要な情報だけを新しく読みます。
最新性や正確性と衝突する場合は、キャッシュより正確性を優先してください。
セッション前の30秒チェック
YOUR NEXT SESSION
チェックするほどセッションは軽くなります。
ONE LINE TO REMEMBER
概算削減率=ヒット率×(1−読み取り単価/通常入力単価)。読み取り単価10%、ヒット率80%なら入力コストは約72%減ります。
いいえ。TTL、最小長、割引率、usageフィールドはモデルとプロバイダーで異なります。
保証されません。ポリシー、TTL、内部コンテキスト管理によって異なります。
2026年8月13日時点の公式文書と原研究を照合し、Orcaの数値はローカルusageログから再集計しました。