Token exhaustion in a pelican-SVG test
In Willison’s pelican-SVG test, Sonnet 5.5 at “max” thinking effort used 128,000 tokens, costing $1.28, before running out of tokens without producing an SVG.
Evidencia a favor
Extracto original
the "max" thinking effort pelican thought for 128,000 tokens (at a cost of $1.28) before running out of tokens and failing to produce an SVG.Claude Sonnet 5.5
Contexto
Here are some pelicans riding bicycles . Sonnet 5.5 suffered from the same bug as Opus 5.5 :
Abrir el original · Párrafo 3 (se abre en una pestaña nueva)Fuente del texto original (se abre en una pestaña nueva)
La ubicación procede del texto original; compruebe la redacción y la atribución en su contexto.
Compartir informaciónVerificar esta afirmación