← Day 24 · All days · Day 26 →
GPT, Claude and Gemini had partial days.
No answer came back today, so nothing was compared.
Sunday, Oct 4 2026 · Day 25
0 of 150
RESPONSES · EVERY REQUEST FAILED
Missing responses 150
- MissingGPT50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
- MissingClaude50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
- MissingGemini50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
Tokens and costShowHideOutput tokens billed, input tokens, response time and cost, by model
| Model | Output length | 7 days | Output tokens billed | Input tokens | Response time | Cost |
|---|---|---|---|---|---|---|
| GPT | · | +1% | 0 | unchanged | · | $0.00 |
| Claude | · | 0% | 0 | unchanged | · | $0.00 |
| Gemini | · | 0% | 0 | unchanged | · | $0.00 |
| All three | 0 | $0.00 | ||||
Each reading is against the model’s own recent past. The line is output length over the last 25 days, in the band its ordinary day sits in (plus or minus 15%), with a dot on today. A partial day’s cost is what was spent, never scaled up.
All verdictsShowHide150 verdicts, one per question and model, each change marked on its row
| Change | Prompt | Model | Outcome | Correct | Format | Detail | ≈Tokens | Latency | Provider | Flags |
|---|---|---|---|---|---|---|---|---|---|---|
| D1drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| D2drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D4drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D5drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D7drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D9drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D13drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D14drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D17drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D20drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D28drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D34drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R1refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R5refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R10refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| R16refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R19refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R23refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R24refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R30refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R33refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R36refusal | claude-opus-5 | error | · | · | · | · | 0.3 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P1recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P3recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P6recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P7recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| P14recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P15recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P18recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P22recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P26recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P28recommendation | claude-opus-5 | error | · | · | · | · | 0.2 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P29recommendation | claude-opus-5 | error | · | · | · | · | 0.5 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P37recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F1Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F1Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F3Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F3Bframing | claude-opus-5 | error | · | · | · | · | 0.3 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F14Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F14Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F18Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F18Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F22Aframing | claude-opus-5 | error | · | · | · | · | 0.3 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F22Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H9hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H11hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H13hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H27hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H36hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H37hedging | claude-opus-5 | error | · | · | · | · | 0.4 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · |
Model names link to the full response. ≈Tokens = visible characters ÷ 4. Latency = wall time of the API call. Detail = first extracted pick, pair stance (arm A|arm B) or scored answer. Definitions.