Intelligenz, Preis und Geschwindigkeit — in vier Diagrammen
Die gesamte Modelllandschaft auf einem Bildschirm gelesen: wer die höchste Punktzahl hat, was es pro Million Tokens kostet und wie schnell es antwortet. Jeder Punkt ist eine Messung, die von Artificial Analysis veröffentlicht wurde, hier jeden Morgen aktualisiert. Nichts auf dieser Seite ist unsere Meinung.
Der zusammengesetzte Intelligenzindex, Top 16. Varianten desselben Modells bei unterschiedlichen Denkaufwänden werden einmal gezählt.
Jeder Punkt ist ein Modell — Varianten des Denkaufwands erscheinen hier separat, weil der Kompromiss zwischen ihnen genau das ist, was dieses Diagramm zeigt. Links ist günstiger, höher ist intelligenter — der beste Wert sitzt also oben links. Der Preis ist der gemischte Satz von Artificial Analysis, drei Eingabetokens für ein Ausgabetoken. Die horizontale Skala ist logarithmisch, da die Preise einen Faktor von achthundert spannen.
Der beste Intelligenzindex, der an einem bestimmten Tag verfügbar ist, vom ersten Modell im Set bis heute. Die Linie geht nur nach oben: sie springt, wann immer ein Modell jeden Vorgänger übertrifft. Bis jetzt siebenundzwanzig Schritte.
Ein Balken pro Unternehmen: ihr höchstbewertetes Modell, egal was es kostet. Dies ist das Diagramm, das die Frage beantwortet « wer tatsächlich wettbewerbsfähig ist » ohne eine Tabelle mit sechshundert Zeilen zu lesen.
Ausgabetokens pro Sekunde gegen den Intelligenzindex. Ein Modell kann brillant und langsam oder schnell und oberflächlich sein — hier zeigt sich der Kompromiss.
Median-Ausgabetokens pro Sekunde, Top 14. Geschwindigkeit wird an deutlich weniger Modellen als Intelligenz gemessen, also lesen Sie dies als eine Shortlist, nicht als ein vollständiges Ranking.