Der lokale MessplatzMac Studio · Apple M4 Max · 64 GB Unified MemoryMessplatz ansehen →
Prüfstand v2
Foundation · Noch keine veröffentlichten v2-Ergebnisse.
Der archivierte Pilot bleibt eine eigene historische Evidenzmenge.
Nur Modell
Gleiche Aufgaben und Validatoren für verwaltete APIs und selbst gehostete Modelle. Ergebnisse werden je Aufgabe und Replikat gezeigt.
- M01 · Ressourcen-Scheduling · 1.0.0
- M02 · Operationsplanung über zwölf Tage · 1.0.0
- M03 · Code-Debugging und Reparatur · 1.0.0
- M04 · Verlustfreie Präzisionstransformation · 1.0.0
- M05 · Evidenz-Audit · 1.0.0
- M06 · Mehrquellen-Synthese · 1.0.0
- M07 · Regelfindung und Generalisierung · 1.0.0
- M08 · Visuelle Routenplanung · 1.0.0
Vergleich pro Aufgabe
Vorgesehene Ansichten: gleiches Modell mit unterschiedlichem Effort; Provider-Defaults; konfigurierte Maxima; API gegen lokalen Runtime. Keine globale Rangliste.
- Ergebnis
- Validator-Evidenz, Teilprüfungen, Abschlussstatus, Replikate (3 oder 5)
- Effort
- Provider-native Labels; lokale Reasoning-Konfiguration separat
- Messwerte
- Latenz, Wall-Clock, Input-/Output-/Reasoning-Tokens, API-Kosten
- Runtime
- Backend und Version, Weights-Revision, Quantisierung, Dtype, Chat-Template, Sampling, Kontext, Chip, Speicher, OS
- Lokale Leistung
- TTFT, Tokens/s, Peak Unified Memory soweit messbar. API-Kosten 0; Hardware und Energie noch nicht bewertet.
Effort-Kurven sind nur innerhalb desselben Providers und Modells vergleichbar. Unbekannte Messwerte bleiben unbekannt.