StepFuns Step 5 Preview: 600B-MoE-Modell für Agenten, Gewichte am 15. Oktober

StepFun hat Step 5 Preview gestartet, ein dünnbesetztes Mixture-of-Experts-Modell, das auf langfristige Agentenaufgaben wie Programmierung, Finanzanalyse und professionelle Wissensaufgaben abzielt. Das Modell ist ab sofort über die API von StepFun verfügbar; das Unternehmen gibt an, dass offene Gewichte am 15. Oktober folgen werden.

Architektur und Umfang

StepFun beschreibt Step 5 Preview als Modell mit rund 600 Milliarden Gesamtparametern, von denen etwa 27 Milliarden pro Token aktiv sind, aufgebaut auf einem 92-schichtigen, schmalen und tiefen Transformer statt eines breiteren Netzwerks. Das Unternehmen argumentiert, dass dies bei der Langkontextverarbeitung längere Schlussfolgerungspfade ermöglicht. Das Modell unterstützt ein Kontextfenster von einer Million Token und nimmt sowohl Text- als auch Bildeingaben entgegen. Das Training stützte sich Berichten zufolge auf On-Policy-Reinforcement-Learning für lange Horizonte mit Techniken wie spekulativem Decoding und FP8-MoE-Berechnungen, um den Prozess zu beschleunigen – Details, die aus StepFuns eigenen Veröffentlichungsmaterialien stammen.

Benchmarks und Preise

Laut Artificial Analysis erreicht Step 5 Preview auf dem Intelligence Index rund 44 Punkte und liegt damit etwa gleichauf mit Kimi K3 (max) sowie ungefähr einen Punkt hinter GLM-5.3 und Qwen3.8 Max. Dieselbe Benchmarkquelle attestiert dem Modell gute Ergebnisse bei „Humanity's Last Exam“ und CritPt-Physikfragen, aber Rückstände gegenüber Konkurrenten bei agentischen Benchmarks wie GDPval-AA und Terminal-Bench 4.0 – bei einer berichteten Halluzinationsrate von 43 Prozent. Die von StepFun angegebene API-Bepreisung liegt bei etwa 1 US-Dollar pro 1 Million Eingabetoken und 2,70 US-Dollar pro 1 Million Ausgabetoken, bei rund 100 Token pro Sekunde Ausgabe – bemerkenswert günstig im Vergleich zu ähnlichen Frontier-nahen Modellen, wobei es sich um Listenpreise und nicht um geprüfte Stückkosten handelt.

Offene Gewichte sind noch nicht verfügbar

Zum Zeitpunkt der Veröffentlichung enthält das Hugging-Face-Repository von StepFun für das Modell nur eine Platzhalterdatei, ohne Gewichte, Lizenz oder Model Card. Das Unternehmen hat sich zu einer offenen Veröffentlichung am 15. Oktober verpflichtet; sobald verfügbar, benötigt das Self-Hosting des vollständigen Modells rund 1,2 Terabyte Arbeitsspeicher in BF16, noch vor Berücksichtigung des KV-Cache – das bedeutet Multi-GPU-Serverhardware statt einer einzelnen Workstation.

Die oben genannten Benchmark- und Kostenwerte sind als Hersteller- und Drittanbieterangaben zu betrachten, bis unabhängige Tests sie bestätigen; der 15. Oktober als Termin für offene Gewichte gilt als von StepFun angekündigter Plan und nicht als garantierte Veröffentlichung.

Quellen: MarkTechPost, Pandaily.