Arena.ai betreibt eine Arena, in der Menschen Modellantworten vergleichen. Für die Auswertung zog die Plattform Zehntausende Antworten mit hohem Denkaufwand heran und zählte darin Sprachmerkmale aus. Verglichen wurden Fable 5 und Fable 5.1, an einigen Stellen zusätzlich Opus 5 als Bezugspunkt.
Rückläufig sind vor allem Gesten der Zustimmung. Eröffnungen wie „yes“ oder „exactly“ stehen in 0,99 statt 2,35 Prozent der Antworten. Wörter wie „honestly“ und „frankly“ fallen um 45 Prozent je 1.000 Wörter, Abtönungen wie „perhaps“ und „arguably“ um 36 Prozent, feste Wendungen wie „load-bearing“ um 20 Prozent.
Bei der Zeichensetzung geht die Bewegung in beide Richtungen: Gedankenstriche werden um 32 Prozent seltener, Semikolons um 63 Prozent häufiger, jeweils je 1.000 Wörter. Der Wortschatz wird einfacher – lange Inhaltswörter sinken von 42,6 auf 38,6 Prozent, abstrakte Substantive um 25 Prozent von 4,39 auf 3,28 je 100 Wörter.
Länger geworden ist Fable 5.1 trotzdem. Die mittlere Antwortlänge steigt von 319 auf 414 Wörter und bleibt damit 21 Prozent unter den 525 Wörtern von Opus 5. Die Satzlänge liegt mit 12,54 Wörtern leicht über Opus 5 mit 12,20.
Die Zahlen stammen von Arena.ai selbst und sind nicht unabhängig nachgerechnet. Die Plattform veröffentlicht weder die Auswahl der Aufgaben noch die Definition der gezählten Merkmale. Als Urteil über Textqualität taugt die Auswertung deshalb nicht; sie beschreibt, was sich im Stil messbar verschoben hat.