Gemma
KNOWNTechnische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Alle bekannten Varianten dieser Familie. Ein direkter Artikel-Link springt exakt zur genannten Variante.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| TIGER-Lab/MMLU-ProScore | 45.1 | Quelle ↗Community · abgerufen 2026-10-22 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| TIGER-Lab/MMLU-Prommlu_pro | 82.6 | Quelle ↗Community · 2026-04-02 |
| llamaindex/ParseBenchtable | 70 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| llamaindex/ParseBenchlayout | 59.2 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| llamaindex/ExtractBenchmean | 70.27 | Quelle ↗Community · 2026-08-26TestdetailsPipeline name: gemma4_26b_vllm_extract_oneshot_structured_output_file; self-hosted on vLLM, one-shot JSON-Schema structured output |
| llamaindex/ParseBenchtext_content | 83.8 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| Benchmark | Wert | Beleg |
|---|---|---|
| MMMU/MMMU_Prommmu_pro_vision | 73.8 | Quelle ↗2026-05-12 |
| llamaindex/ParseBenchchart | 14.2 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| cais/hlehle | 17.2 | Quelle ↗Community · 2026-04-02TestdetailsWith search |
| llamaindex/ParseBenchtext_formatting | 65.1 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| Idavidrein/gpqadiamond | 82.3 | Quelle ↗Community · 2026-04-02 |
| llamaindex/ExtractBenchmedium | 59.61 | Quelle ↗Community · 2026-08-26TestdetailsPipeline name: gemma4_26b_vllm_extract_oneshot_structured_output_file; self-hosted on vLLM, one-shot JSON-Schema structured output |
| llamaindex/ParseBenchmean | 58.5 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_26b_vllm_with_layout |
| llamaindex/ExtractBenchshort | 77.7 | Quelle ↗Community · 2026-08-26TestdetailsPipeline name: gemma4_26b_vllm_extract_oneshot_structured_output_file; self-hosted on vLLM, one-shot JSON-Schema structured output |
| llamaindex/ExtractBenchlong | 28.88 | Quelle ↗Community · 2026-08-26TestdetailsPipeline name: gemma4_26b_vllm_extract_oneshot_structured_output_file; self-hosted on vLLM, one-shot JSON-Schema structured output |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| llamaindex/ExtractBenchmean | 51.85 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e2b_vllm_extract_oneshot_structured_output_file |
| llamaindex/ExtractBenchlong | 14.58 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e2b_vllm_extract_oneshot_structured_output_file |
| MMMU/MMMU_Prommmu_pro_vision | 44.2 | Quelle ↗Community · 2026-05-12 |
| TIGER-Lab/MMLU-Prommlu_pro | 60 | Quelle ↗Community · 2026-04-02 |
| ARTPARK-IISc/Vaani-Benchmark-V1.0Hindi_WER | 19.4 | Quelle ↗Community · 2026-06-26 |
| Benchmark | Wert | Beleg |
|---|---|---|
| LiquidAI/ifstruct-v1.0ifstruct_v1 | 64.85 | Quelle ↗Community · 2026-06-30 |
| MathArena/aime_2026MathArena/aime_2026 | 37.5 | Quelle ↗Community · 2026-03-02 |
| llamaindex/ExtractBenchshort | 63.71 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e2b_vllm_extract_oneshot_structured_output_file |
| llamaindex/ExtractBenchmedium | 28.96 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e2b_vllm_extract_oneshot_structured_output_file |
| Idavidrein/gpqadiamond | 43.4 | Quelle ↗Community · 2026-04-02 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| llamaindex/ExtractBenchmean | 45.39 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_12b_vllm_extract_oneshot_structured_output_file |
| llamaindex/ExtractBenchshort | 53.62 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_12b_vllm_extract_oneshot_structured_output_file |
| cais/hlehle | 5.2 | Quelle ↗Community · 2026-05-23TestdetailsNo tools |
| llamaindex/ExtractBenchmedium | 30.82 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_12b_vllm_extract_oneshot_structured_output_file |
| MathArena/aime_2026MathArena/aime_2026 | 77.5 | Quelle ↗Community · 2026-05-23TestdetailsNo tools |
| Benchmark | Wert | Beleg |
|---|---|---|
| llamaindex/ExtractBenchlong | 13.16 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_12b_vllm_extract_oneshot_structured_output_file |
| MMMU/MMMU_Prommmu_pro | 69.1 | Quelle ↗Community · 2026-05-23 |
| Idavidrein/gpqadiamond | 78.8 | Quelle ↗Community · 2026-05-23 |
| TIGER-Lab/MMLU-Prommlu_pro | 77.2 | Quelle ↗Community · 2026-05-23 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| sapbot/ask-my-agent-bench-2fallback | 72.1 | Quelle ↗Community · 2026-06-23 |
| llamaindex/ParseBenchtext_content | 89.9 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| llamaindex/ParseBenchchart | 15 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| llamaindex/ParseBenchlayout | 57.4 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| TIGER-Lab/MMLU-Prommlu_pro | 85.2 | Quelle ↗Community · 2026-04-02 |
| Benchmark | Wert | Beleg |
|---|---|---|
| Idavidrein/gpqadiamond | 84.3 | Quelle ↗Community · 2026-04-02 |
| LiquidAI/ifstruct-v1.0ifstruct_v1 | 95.9 | Quelle ↗Community · 2026-06-30 |
| llamaindex/ParseBenchtable | 80.6 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| llamaindex/ParseBenchtext_formatting | 69.3 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| llamaindex/ParseBenchmean | 62.4 | Quelle ↗Community · 2026-04-17TestdetailsPipeline name: gemma4_31b_vllm_with_layout |
| cais/hlehle | 26.5 | Quelle ↗Community · 2026-04-02TestdetailsWith search |
| MMMU/MMMU_Prommmu_pro_vision | 76.9 | Quelle ↗2026-05-12 |
| joelniklaus/LEXam-hardlexam_hard | 37.41 | Quelle ↗Community · 2026-06-11Testdetailslighteval, LEXam paper prompts, one response per question, no tools; DeepSeek-R1-0528 judge; mean of the German and English means over the 518 questions, 0-100 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| llamaindex/ParseBenchtext_formatting | 52.5 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| llamaindex/ExtractBenchlong | 26.82 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e4b_vllm_extract_oneshot_structured_output_file |
| Idavidrein/gpqadiamond | 58.6 | Quelle ↗Community · 2026-04-02 |
| TIGER-Lab/MMLU-Prommlu_pro | 69.4 | Quelle ↗Community · 2026-04-02 |
| llamaindex/ExtractBenchshort | 81.1 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e4b_vllm_extract_oneshot_structured_output_file |
| Benchmark | Wert | Beleg |
|---|---|---|
| LiquidAI/ifstruct-v1.0ifstruct_v1 | 76.65 | Quelle ↗Community · 2026-06-30 |
| llamaindex/ExtractBenchmean | 69.64 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e4b_vllm_extract_oneshot_structured_output_file |
| MathArena/aime_2026MathArena/aime_2026 | 42.5 | Quelle ↗Community · 2026-03-02 |
| llamaindex/ParseBenchchart | 7.7 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| llamaindex/ParseBenchtable | 25 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| llamaindex/ParseBenchmean | 40.5 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| llamaindex/ParseBenchlayout | 35.8 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| llamaindex/ExtractBenchmedium | 48.93 | Quelle ↗Community · 2026-08-24TestdetailsPipeline name: gemma4_e4b_vllm_extract_oneshot_structured_output_file |
| llamaindex/ParseBenchtext_content | 81.4 | Quelle ↗Community · 2026-04-14TestdetailsPipeline name: gemma4_e4b_vllm_with_layout |
| MMMU/MMMU_Prommmu_pro_vision | 52.6 | Quelle ↗Community · 2026-05-12 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| ARTPARK-IISc/Vaani-Benchmark-V1.0Score | 24.6 | Quelle ↗Community · abgerufen 2026-10-22 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
| Benchmark | Wert | Beleg |
|---|---|---|
| Idavidrein/gpqadiamond | 33.8383838384 | Quelle ↗Community · 2026-04-17TestdetailsGPQA Diamond |
| LEXam-Benchmark/LEXammcq_4_choices | 29.94 | Quelle ↗Community · 2026-06-02 |
| Idavidrein/gpqamain | 36.5470852018 | Quelle ↗Community · 2026-06-30TestdetailsGPQA chain-of-thought |
| LEXam-Benchmark/LEXamopen_question | 41.29 | Quelle ↗Community · 2026-06-02 |
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Technische Leistungsdaten sind für diese Variante noch nicht vollständig bestätigt.
Alle verbundenen Artikel, neueste zuerst.