מערכת שנבדקה

Muse Glimmer 30B

נבדק כמודל APIמודל פתוחמטא

מודל פתוח של מטא עם חלון הקשר של 131K טוקנים. ציון האיכות הכולל שלו במבחני ההערכה עומד על 41.0.

ציונים לפי יכולת
מתמטיקה
כיסוי 13%
94.7
ניתוח נתונים
כיסוי 25%
78.8
הבנה חזותית
כיסוי 30%
77.5
עמידה בהוראות
כיסוי 19%
77.0
שימוש בכלים
כיסוי 18%
75.5
דיוק עובדתי
כיסוי 28%
74.6
מחקר ברשת
כיסוי 15%
74.6
הבנת תמונות ומסמכים חזותיים
כיסוי 33%
74.0
ביצוע משימות מרובות שלבים
כיסוי 17%
70.6
הפעלת מחשב
כיסוי 49%
69.4
קוד ופיתוח תוכנה
כיסוי 16%
58.0
כתיבת קוד עצמאית
כיסוי 11%
51.2
חשיבה מדעית
כיסוי 24%
43.6
תוצאות

כל תוצאות המבחנים (14)

מתמטיקה

מבחן הערכהסטטוסציוןמשקלמקור
AIME 2026
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
94.70.72קישור למקור

לא נמצאו תוצאות עבור: LiveBench · LiveBench Mathematics · HMMT Feb 2026 · MATH Level 5 · MathVision · FrontierMath v2

ניתוח נתונים

מבחן הערכהסטטוסציוןמשקלמקור
CharXiv
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
78.80.72קישור למקור

לא נמצאו תוצאות עבור: LiveBench · LiveBench Data Analysis

הבנה חזותית

מבחן הערכהסטטוסציוןמשקלמקור
CharXiv
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
78.80.72קישור למקור
ScreenSpot Pro
מדד משני
לפי דיווח היצרן
75.40.42קישור למקור

לא נמצאו תוצאות עבור: OfficeQA Pro · MathVision · ERQA · ZeroBench · VideoMMMU

עמידה בהוראות

מבחן הערכהסטטוסציוןמשקלמקור
IFBench
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
77.00.72קישור למקור

לא נמצאו תוצאות עבור: LiveBench · LiveBench Instruction Following · IFEval · MAXIFE

שימוש בכלים

מבחן הערכהסטטוסציוןמשקלמקור
MCP Atlas
מדד משני
לפי דיווח היצרן
75.50.42קישור למקור

לא נמצאו תוצאות עבור: Berkeley Function Calling Leaderboard (BFCL) V4 · Toolathlon · Claw-Eval

דיוק עובדתי

מבחן הערכהסטטוסציוןמשקלמקור
DeepSearchQA
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לפי דיווח היצרן
74.60.34קישור למקור

לא נמצאו תוצאות עבור: SimpleQA · SimpleQA Verified

מחקר ברשת

מבחן הערכהסטטוסציוןמשקלמקור
DeepSearchQA
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לפי דיווח היצרן
74.60.34קישור למקור

לא נמצאו תוצאות עבור: WebArena-Verified · WideResearch · Agents' Last Exam · BrowseComp

הבנת תמונות ומסמכים חזותיים

מבחן הערכהסטטוסציוןמשקלמקור
MMMU-Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
74.00.72קישור למקור

לא נמצאו תוצאות עבור: Humanity's Last Exam (HLE) · MMMU

ביצוע משימות מרובות שלבים

מבחן הערכהסטטוסציוןמשקלמקור
OSWorld
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
65.90.72קישור למקור
MCP Atlas
מדד משני
לפי דיווח היצרן
75.50.42קישור למקור
DeepSearchQA
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לפי דיווח היצרן
74.60.34קישור למקור

לא נמצאו תוצאות עבור: Berkeley Function Calling Leaderboard (BFCL) V4 · Terminal-Bench 2.0 · Terminal-Bench 3.0 · Toolathlon · AndroidWorld · WideResearch · Agents' Last Exam · AutomationBench · JobBench · MLE-bench · Gert Labs · Claw-Eval

הפעלת מחשב

מבחן הערכהסטטוסציוןמשקלמקור
OSWorld
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
65.90.72קישור למקור
ScreenSpot Pro
מדד משני
לפי דיווח היצרן
75.40.42קישור למקור

לא נמצאו תוצאות עבור: AndroidWorld · WebArena-Verified

קוד ופיתוח תוכנה

מבחן הערכהסטטוסציוןמשקלמקור
SWE-bench Verified
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לפי דיווח היצרן
76.00.85קישור למקור
SWE-bench Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
51.20.72קישור למקור
SciCode
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
43.60.72קישור למקור

לא נמצאו תוצאות עבור: LiveBench · SWE-rebench · LiveCodeBench · Aider Polyglot · LiveBench Coding · LiveBench Agentic Coding · MirrorCode · SWE-bench Lite · CursorBench · SWE-bench Multilingual · Vibe Code Bench · NL2Repo · DeepSWE · FrontierCode 1.1 · ProgramBench

כתיבת קוד עצמאית

מבחן הערכהסטטוסציוןמשקלמקור
SWE-bench Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
51.20.72קישור למקור

לא נמצאו תוצאות עבור: LiveBench · Terminal-Bench 2.0 · Terminal-Bench 3.0 · LiveBench Agentic Coding · CursorBench · Vibe Code Bench · DeepSWE

חשיבה מדעית

מבחן הערכהסטטוסציוןמשקלמקור
SciCode
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
43.60.72קישור למקור

לא נמצאו תוצאות עבור: GPQA / GPQA Diamond · SuperGPQA · CritPt

מערכות נוספות

להשוואה

Apodex 1.1Celeris-1ChatGPTClaudeClaude CodeClaude Fable 5Claude Fable 5.1Claude Haiku 5.5Claude Opus 4.6Claude Opus 4.7Claude Opus 4.7 (Adaptive)Claude Opus 4.8Claude Opus 5Claude Opus 5.5Claude Sonnet 4.6Claude Sonnet 5Claude Sonnet 5.5Command A+CursorDeepSeek-R1DeepSeek R1 Distill Qwen 32BDeepSeek V3DeepSeek V3 0324DeepSeek V3.1DeepSeek V3.1 (Reasoning)DeepSeek V3.2DeepSeek V4.1 Flash 1017DeepSeek V4 Flash Vision ExpDeepSeek V4 Pro 0813DevinExaone 4.0 32BGemini 2.5 FlashGemini 2.5 ProGemini 3.1 ProGemini 3.5 FlashGemini 3.5 Flash-LiteGemini 3.6 FlashGemini 3.7 FlashGemini 3.8 FlashGemini 3 FlashGemini 3 ProGemini 4 ArgonGeminiNano Banana 2.1Gemma 4 26B A4BGitHub CopilotGLM-4.5-AirGLM-4.6GLM-4.7GLM-4.7-FlashGLM-5GLM-5.1GLM-5.2GLM-5.3GLM-5.3-FlashGLM 5.3 PrimeGLM-5-TurboGLM-5V-TurboGPT-5.1GPT-5.2GPT-5.3 CodexGPT-5.4GPT-5.5GPT-5.6 LunaGPT-5.6 SolGPT-5.6 TerraGPT-6.1 SolGPT-6.1 TerraGPT-6.1 Terra ProGPT-6 AstraGPT-6 LunaGPT-6 SolGranite-4.0-350MGranite-4.0-H-1BGranite-4.0-H-350MGranite 4.2 8BGrok 4Grok 4.1 FastGrok 4.1 Fast (Reasoning)Grok 4.3Grok 4.5Grok 4.6Grok 4.7Grok 4 Fast (Reasoning)GrokGrok Code Fast 1Hy3Hy3 PreviewInklingInkling-SmallInstinctK-ExaoneKimi K2.6Kimi K2Kimi K2.5Kimi K2.5 (Reasoning)Kimi K2.7 CodeKimi K3LFM2.5-2.6BLFM2.5-8B-A1BLing 2.6 FlashLing 3.0 FlashLing 3.0 Flash VLLing 3.1 FlashManusMercury 2Mercury 2.5Meta AIMicrosoft CopilotMiMo-V2.5-ProMiMo-V2.6-FlashMiMo-V2.6-ProMiMo-V2-FlashMiMo-V2-OmniMiMo-V2-ProMiniMax M2.5MiniMax M2.7MiniMax M3MiniMax M3.1 FlashMistral Large 2Mistral Large 3Mistral Large 4Le ChatMistral Medium 3Mistral Medium 3.5 128BMistral Small 4Muse SparkMuse Spark 1.1Muse Spark 1.2Muse Spark OpenMuse WonderMuse Wonder FullNemotron 3.5 Bolt 74B-A9BNemotron 3.5 LightningNemotron 3.5 Super VLNemotron 3.5 Super VL 120B A12BNemotron 3 Nano Omni 30B A3BNemotron 3 UltraNova ProCodexDotsPerplexityPhi-4Quasar 438BQwen3.5-122B-A10BQwen3.5-27BQwen3.5-35B-A3BQwen3.5 397BQwen3.6-27BQwen3.6-35B-A3BQwen 3.6 Max (preview)Qwen3.6 PlusQwen3.7 FlashQwen3.7 MaxQwen3.7 PlusQwen3.8 2.4T A95BQwen3.8-27BQwen3.8 FlashQwen3.8-Flash-NextQwen3.8 Max PrimeQwen3.8 Omni FlashBeam 1.0 501B-A23BSarvam 105BSarvam 30BSolar Pro 2Solar Pro 3Step 3.5 FlashStep 3.7 FlashStep 5 PreviewSwitchyardTrinity-Large-Thinking