SemiAnalysis: Claude Fable 5.2 debuteert bovenaan de GDPx-ranglijst met 16,4%, tegen 31% hogere kosten per taak dan Fable 5.1

Volgens SemiAnalysis debuteert Claude Fable 5.2 bovenaan de GDPx-ranglijst met een score van 16,4%. De winst ten opzichte van Claude Opus 5.5 zit volgens het bedrijf vooral in chipontwerp (+10,8%) en software-engineering (+15,5%), met kleinere verbeteringen in materiaalkunde (+5,3%) en biologie (+7,7%), en nauwelijks verandering in kwantitatieve analyse en hardwareontwerp.

In de RSI-categorie, die SemiAnalysis gebruikt om het vermogen tot AI-onderzoek te volgen, scoort Fable 5.2 volgens het bedrijf ongeveer even hoog als Claude Sonnet 5.5. Het ziet dit als iets wat overeenkomt met de verklaring van Anthropic dat het tijdens de training de vooruitgang op het gebied van AI-onderzoek heeft beperkt.

Op basis van de rollouts van het model zegt SemiAnalysis dat Fable 5.2 veel grondiger is in het testen van zijn werk: het schrijft vaak honderden of duizenden testgevallen, terwijl Opus 5.5 en Fable 5.1 het bij ongeveer 20 hielden. Volgens SemiAnalysis kost die volharding meer: de gemiddelde kosten per taak liggen 31% hoger dan bij Fable 5.1 ($88,15 tegenover $67,16), hoewel Fable 5.2 per miljoen tokens 20% goedkoper is.

SemiAnalysis noemt Fable 5.2 een marginale verbetering, niet vergelijkbaar met de oorspronkelijke release van Mythos. Dit zijn de eigen cijfers en meningen van SemiAnalysis.