Anthropics neues Sonnet-Modell erreicht nahezu Opus-Leistung, verbraucht aber mehr Token

Anthropic hat Claude Sonnet 5.5 am 28. September zum gleichen Listenpreis wie Sonnet 5 veröffentlicht. Das Unternehmen gibt an, dass das Modell über 30 % schneller ist und pro Aufgabe bis zu 30 % weniger kostet.

Ein unabhängiges Benchmarking-Unternehmen kam zu einem anderen Ergebnis bei den Kosten, als es das Modell an seine Grenzen brachte.

Folge uns auf X, um die neuesten Nachrichten in Echtzeit zu erhalten

Anthropics zweites 5.5-Modell erscheint nur Tage nach Opus

Sonnet 5.5 ist das zweite Modell der Claude-5.5-Familie. Anthropic brachte Opus 5.5 am 22. September auf den Markt. Am selben Tag veröffentlichte OpenAI auch GPT-6 Sol und Luna.

Das neue Modell behält die Preise von Sonnet 5 bei: 2 $ pro Million Eingabetokens und 10 $ pro Million Ausgabetokens. Anthropic meldete beim agentischen Coding-Test Terminal-Bench 4.0 einen Wert von 70,6 %. Sonnet 5 kam lediglich auf 10,3 %, während Opus 5.5 66,4 % erreichte.

„Während Opus 5.5 für komplexe Aufgaben konzipiert ist, die sorgfältiges Urteilsvermögen erfordern, ist Sonnet 5.5 besonders stark bei klar umrissenen Alltagsaufgaben, der Fehlerbehebung und der Erstellung ausgefeilter Dokumente, Präsentationen und Tabellen“, so das Team.

Anthropic zufolge erweitert Sonnet 5.5 die Grenzen seiner Fähigkeiten nicht. Die Ausrichtungsprüfung konzentrierte sich daher auf Risiken wie die Irreführung von Nutzern und die Unterstützung bei missbräuchlicher Nutzung in Bereichen mit hohem Schadenspotenzial.

Sonnet 5.5 wird außerdem mit Cybersicherheitsvorkehrungen und Anti-Destillierungs-Klassifikatoren ausgeliefert. Diese blockieren Versuche, die Schlussfolgerungen des Modells zu extrahieren, um Konkurrenzsysteme zu trainieren. Claude Haiku 5.5 soll in den kommenden Wochen folgen.

Unterdessen hat OpenAI ein kommendes Modell, GPT-6.1 Astra, aus Sicherheitsgründen auf Eis gelegt. CNBC bestätigte am Montag, dass das Modell die Standards des Unternehmens nicht erfüllte.

Artificial Analysis stellt bei maximalem Aufwand einen höheren Tokenverbrauch fest

Artificial Analysis, das Benchmarking-Unternehmen, das Grok 4.7 auf Platz vier einstufte, gab Sonnet 5.5 im Intelligence Index einen Wert von 56. Damit liegt das Modell insgesamt auf Platz zwei, 2 Punkte hinter Opus 5.5 bei maximalem Aufwand.

Das Unternehmen ermittelte für Sonnet 5.5 bei Terminal-Bench 4.0 einen Wert von 64 %, gegenüber 60 % für Opus 5.5 und GPT-6 Astra. Bei Tests zu Wissensarbeit wie GDPval-AA schnitt Sonnet 5.5 laut den Ergebnissen ungefähr gleich gut ab wie Opus 5.5.

Das Unternehmen erklärte, Sonnet 5.5 habe deutlich mehr Tokens benötigt, um diese Ergebnisse zu erzielen.

„Bei maximalem Aufwand, bei dem die Leistung beinahe an die von Opus 5.5 heranreicht, verwendete Claude Sonnet 5.5 etwa 193.000 Ausgabetokens pro Intelligence-Index-Aufgabe“,

Das sind etwa 60 % mehr als bei Opus 5.5 und Sonnet 5 bei maximalem Aufwand. Zudem ist der Wert ungefähr siebenmal so hoch wie die Anzahl der Tokens von GPT-6 Astra bei maximalem Aufwand.

Kunden mit frühem Zugang, die von Anthropic zitiert wurden, berichteten im Vergleich zu Sonnet 5 von einem gegenteiligen Trend, allerdings bei anderen Workloads. Balyasny Asset Management verzeichnete bei seinen Finanzaufgaben einen deutlich geringeren Tokenverbrauch.

„Bei unserer privaten Testsuite mit 2.441 Finanzaufgaben aus den Bereichen Fragen und Antworten, Extraktion, Analyse und Prognosen schnitt Claude Sonnet 5.5 besser ab als Sonnet 5 und verwendete etwa 121.000 Tokens pro Antwort, während Sonnet 5 497.000 benötigte“, erklärte Joe Poirier, Senior AI Engineer bei Balyasny Asset Management.

Artificial Analysis testete eine Vorabversion mit einem Fehler bei der strukturierten Ausgabe, den Anthropic inzwischen behoben hat. Das Unternehmen plant, die betreffenden Bewertungen in Kürze zu wiederholen.

Abonnieren Sie unseren YouTube-Kanal, um zu sehen, wie Führungskräfte und Journalisten Experteneinblicke geben.

Quelle: BeInCrypto