Google
Gemma-4-26B-A4B-it
Harnessbenchmark · gemessen am 08.04.2026 20:02
Benchmark-ID
run-20260722-161611-12a767Tool Usage Standard 1.0MoE26BRuntime: openclaw_cli
ℹ
Zur Einordnung: Diese Plattform nutzt Unified Memory – die "VRAM" ist gemeinsamer System-RAM (APU/Superchip); das Modell teilt sich den Speicher mit dem System.
Punkte2.440,00von 2.980,00
Punktequote81,88%
Aufgaben bestanden16von 16
Gesamtdauer218,00s
Einordnung im Feld
3von 30 Systemen
Harnessbenchmark · Leitmetrik: Punktequote (%)
Dieser Lauf ist besser als 93 % aller vergleichbaren Systeme.
Punktequote
82 %
+50 % vs Ø 54,4
Aufgaben bestanden
16
-14 % vs Ø 18,6
Gesamtdauer
218,0 s
-91 % vs Ø 2.395,9
Verteilung im Feld10 – 91 %
Wie schlägt sich dieser Benchmark?
Gemma-4-26B-A4B-it gleiches ModellNVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-05d866
91 %
Devstral-Small-2-24B-Instruct-2512AMD GPU · run-20260722-161611-5f2f86
87 %
Gemma-4-26B-A4B-it dieser LaufAMD GPU · run-20260722-161611-12a767
82 %
MiniMax-M2.53× NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-f6cfe1
81 %
Gemma-4-26B-A4B-it gleiches ModellAMD GPU · run-20260722-161611-9b7325
80 %
MiniMax-M2.53× NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-54019f
79 %
Gemma-4-26B-A4B-it gleiches ModellAMD GPU · run-20260722-161611-0064a9
76 %
Devstral-Small-2-24B-Instruct-2512AMD GPU · run-20260722-161611-798dcc
76 %
Gemma-4-26B-A4B-it gleiches ModellAMD GPU · run-20260722-161611-78ff78
74 %
MiniMax-M2.5-BF16-INT4-AWQNVIDIA GB10 · run-20260722-165444-51f2b3
71 %
Devstral-Small-2-24B-Instruct-2512AMD GPU · run-20260722-161611-23baf9
69 %
MiniMax-M2.53× NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-a58abe
68 %
MiniMax-M2.53× NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161611-2a2c91
65 %
MiniMax-M2.53× NVIDIA RTX PRO 6000 Blackwell Max-Q Workstation Edition · run-20260722-161610-99f36d
61 %
Hardware
GPU: AMD GPU
CPU: 32x AMD RYZEN AI MAX+ 395 w/ Radeon 8060S
RAM: 123 GB
Mainboard: Meigao Innovation Technology (Shen Zhen) Co., Ltd SHWSA (MS-S1 MAX)
Setup
Runtime: openclaw_cli
Quantisierung: -
Betriebssystem: Ubuntu 24.04.2 LTS (Kernel 6.17.0-40-generic)
Treiber: ROCm 7.2.0
Modell: Gemma-4-26B-A4B-it
Aufgaben (16)
| Aufgabe | Status | Punkte | Dauer |
|---|---|---|---|
| Antwortzeit Test | bestanden | 41 / 50 | 3,00 s |
| Format Test | bestanden | 70 / 80 | 4,00 s |
| Dateisystem Setup | bestanden | 106 / 120 | 6,00 s |
| Daten Generierung | bestanden | 130 / 150 | 9,00 s |
| Parsing + Transformation | bestanden | 172 / 200 | 14,00 s |
| Fehlerbehandlung JSON | bestanden | 137 / 150 | 6,00 s |
| Python Tool Usage | bestanden | 141 / 220 | 36,00 s |
| PHP Tool Usage | bestanden | 183 / 220 | 17,00 s |
| Export + Reimport | bestanden | 208 / 240 | 18,00 s |
| Archivierung | bestanden | 167 / 180 | 5,00 s |
| Hash Berechnung | bestanden | 188 / 200 | 5,00 s |
| Textsuche | bestanden | 153 / 180 | 10,00 s |
| Idempotenz Test | bestanden | 97 / 220 | 56,00 s |
| Rechte Problem | bestanden | 202 / 220 | 8,00 s |
| Final JSON | bestanden | 235 / 250 | 6,00 s |
| Finale Ausgabe | bestanden | 210 / 300 | 15,00 s |
Modell-Vergleich
Gemma-4-26B-A4B-it auf verschiedener Hardware
Alle veroeffentlichten Performance-Läufe dieses Modells – jede Blase eine Variante: Position = Prefill (X) × Generation (Y), Blasengröße = Anzahl Läufe. Näher oben rechts = schneller. ★ Gold markiert = dieser Benchmark.
GPUnach Grafikkarte
AMD Radeon 8060S Graphics 42,2 tok/s
CPUnach Prozessor
★ AMD RYZEN AI MAX+ 395 w/ Radeon 8060S 42,2 tok/s dieser Lauf
MBnach Mainboard
★ Meigao Innovation Technology (Shen Zhen) Co., Ltd SHWSA (MS-S1 MAX) 42,2 tok/s dieser Lauf
ENGnach Engine
llama.cpp 42,2 tok/s
DRVnach Treiber
★ ROCm 7.2.0 42,2 tok/s dieser Lauf