← Day 36 · All days · Day 38 →
GPT, Claude and Gemini had partial days.
No answer came back today, so nothing was compared.
Friday, Oct 16 2026 · Day 37
0 of 150
RESPONSES · EVERY REQUEST FAILED
Missing responses 150
- MissingGPT50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
- MissingClaude50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
- MissingGemini50 of 50 missingNo response: a billing error on our side (HTTP 402, payment required). Missing responses are gaps, never counted as changes.
Tokens and costShowHideOutput tokens billed, input tokens, response time and cost, by model
| Model | Output length | 7 days | Output tokens billed | Input tokens | Response time | Cost |
|---|---|---|---|---|---|---|
| GPT | · | · | 0 | unchanged | · | $0.00 |
| Claude | · | · | 0 | unchanged | · | $0.00 |
| Gemini | · | · | 0 | unchanged | · | $0.00 |
| All three | 0 | $0.00 | ||||
Each reading is against the model’s own recent past. The line is output length over the last 30 days, in the band its ordinary day sits in (plus or minus 15%), with a dot on today. A partial day’s cost is what was spent, never scaled up.
All verdictsShowHide150 verdicts, one per question and model, each change marked on its row
| Change | Prompt | Model | Outcome | Correct | Format | Detail | ≈Tokens | Latency | Provider | Flags |
|---|---|---|---|---|---|---|---|---|---|---|
| D1drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| D2drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D4drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D5drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D7drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D9drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D13drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D14drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D17drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D20drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D28drift | claude-opus-5 | error | · | · | · | · | 0.3 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| D34drift | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R1refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R5refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R10refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R16refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.3 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R19refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R23refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R24refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R30refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R33refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| R36refusal | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| P1recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P3recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P6recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.2 s | · | · | ||
| P7recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P14recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P15recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P18recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P22recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P26recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P28recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P29recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| P37recommendation | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F1Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F1Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F3Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F3Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F14Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F14Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F18Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F18Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F22Aframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| F22Bframing | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H9hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H11hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H13hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H27hedging | claude-opus-5 | error | · | · | · | · | 0.2 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H36hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · | ||
| H37hedging | claude-opus-5 | error | · | · | · | · | 0.1 s | · | · | |
| gemini-3.1-pro-preview | error | · | · | · | · | 0.1 s | · | · | ||
| gpt-5.6-sol | error | · | · | · | · | 0.1 s | · | · |
Model names link to the full response. ≈Tokens = visible characters ÷ 4. Latency = wall time of the API call. Detail = first extracted pick, pair stance (arm A|arm B) or scored answer. Definitions.