מערכת שנבדקה

Qwen3.6-27B

נבדק כמודל APIמודל פתוחעליבאבא

מודל פתוח של עליבאבא עם חלון הקשר של 262K טוקנים. ציון האיכות הכולל שלו במבחני ההערכה עומד על 48.4.

ציונים לפי יכולת
הבנה חזותית
כיסוי 41%
75.7
מתמטיקה
כיסוי 71%
74.6
שימוש בכלים
כיסוי 14%
72.4
הפעלת מחשב
כיסוי 18%
70.3
חשיבה מופשטת
כיסוי 35%
70.3
ניתוח נתונים
כיסוי 96%
70.2
ידע וחשיבה
כיסוי 92%
68.8
הבנת תמונות ומסמכים חזותיים
כיסוי 85%
64.8
שפה וניסוח
כיסוי 37%
63.7
ביצוע משימות מרובות שלבים
כיסוי 23%
62.9
חשיבה מדעית
כיסוי 79%
62.9
קוד ופיתוח תוכנה
כיסוי 50%
60.1
עבודה בשורת פקודה
כיסוי 43%
59.3
עמידה בהוראות
כיסוי 53%
58.6
תוצרים מקצועיים
כיסוי 44%
54.8
כתיבת קוד עצמאית
כיסוי 55%
53.8
תוצאות

כל תוצאות המבחנים (32)

הבנה חזותית

מבחן הערכהסטטוסציוןמשקלמקור
CharXiv
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
78.40.72קישור למקור
ERQA
מדד משני
לפי דיווח היצרן
62.50.42קישור למקור
VideoMMMU
מדד משני
לפי דיווח היצרן
84.40.42קישור למקור

לא נמצאו תוצאות עבור: ScreenSpot Pro · OfficeQA Pro · MathVision · ZeroBench

מתמטיקה

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Mathematics
מדידה עצמאית · מתעדכן
לוח עצמאי
79.91.00קישור למקור
AIME 2026
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
94.10.72קישור למקור
HMMT Feb 2026
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
84.30.72קישור למקור
FrontierMath v2
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לוח עצמאי
35.10.40קישור למקור

לא נמצאו תוצאות עבור: MATH Level 5 · MathVision

שימוש בכלים

מבחן הערכהסטטוסציוןמשקלמקור
Claw-Eval
מדד משני · בהסתייגות
לפי דיווח היצרן
72.40.34קישור למקור

לא נמצאו תוצאות עבור: Berkeley Function Calling Leaderboard (BFCL) V4 · MCP Atlas · Toolathlon

הפעלת מחשב

מבחן הערכהסטטוסציוןמשקלמקור
AndroidWorld
מדד משני
לפי דיווח היצרן
70.30.42קישור למקור

לא נמצאו תוצאות עבור: OSWorld · ScreenSpot Pro · WebArena-Verified

חשיבה מופשטת

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench Reasoning
מדידה עצמאית · מתעדכן
לוח עצמאי
70.31.00קישור למקור

לא נמצאו תוצאות עבור: ARC-AGI-3 · ARC-AGI-2 · ZeroBench

ניתוח נתונים

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Data Analysis
מדידה עצמאית · מתעדכן
לוח עצמאי
70.41.00קישור למקור
CharXiv
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
78.40.72קישור למקור

ידע וחשיבה

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Reasoning
מדידה עצמאית · מתעדכן
לוח עצמאי
70.31.00קישור למקור
GPQA / GPQA Diamond
מדידה עצמאית · לוח השוואה
לוח עצמאי
85.90.85קישור למקור
MMLU-Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
86.20.72קישור למקור
Humanity's Last Exam (HLE)
מדידה עצמאית · לוח השוואההערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לפי דיווח היצרן
24.00.72קישור למקור
SuperGPQA
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
66.00.72קישור למקור
MMLU-Redux
מדד משני
לפי דיווח היצרן
93.50.42קישור למקור

הבנת תמונות ומסמכים חזותיים

מבחן הערכהסטטוסציוןמשקלמקור
MMMU-Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
75.80.72קישור למקור
MMMU
מדד משני
לפי דיווח היצרן
82.90.42קישור למקור
Humanity's Last Exam (HLE)
מדידה עצמאית · לוח השוואההערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לפי דיווח היצרן
24.00.38קישור למקור

שפה וניסוח

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Language
מדידה עצמאית · מתעדכן
לוח עצמאי
63.31.00קישור למקור

לא נמצאו תוצאות עבור: Hebrew LLM Leaderboard · מבחן העברית של האתר · Global-MMLU (GMMLU) · INCLUDE · MMLU-ProX

ביצוע משימות מרובות שלבים

מבחן הערכהסטטוסציוןמשקלמקור
Terminal-Bench 2.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
59.30.85קישור למקור
AndroidWorld
מדד משני
לפי דיווח היצרן
70.30.42קישור למקור
Gert Labs
מדד משני · בהסתייגותהערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לוח עצמאי
54.80.40קישור למקור
Claw-Eval
מדד משני · בהסתייגות
לפי דיווח היצרן
72.40.34קישור למקור

לא נמצאו תוצאות עבור: Berkeley Function Calling Leaderboard (BFCL) V4 · Terminal-Bench 3.0 · OSWorld · MCP Atlas · Toolathlon · WideResearch · Agents' Last Exam · AutomationBench · JobBench · DeepSearchQA · MLE-bench

חשיבה מדעית

מבחן הערכהסטטוסציוןמשקלמקור
GPQA / GPQA Diamond
מדידה עצמאית · לוח השוואה
לוח עצמאי
85.90.85קישור למקור
SciCode
מדידה עצמאית · לוח השוואה
לוח עצמאי
37.30.85קישור למקור
SuperGPQA
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
66.00.72קישור למקור

לא נמצאו תוצאות עבור: CritPt

קוד ופיתוח תוכנה

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Coding
מדידה עצמאית · מתעדכן
לוח עצמאי
71.81.00קישור למקור
LiveBench Agentic Coding
מדידה עצמאית · מתעדכן
לוח עצמאי
39.31.00קישור למקור
SWE-bench Verified
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לפי דיווח היצרן
77.20.85קישור למקור
LiveCodeBench
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
83.90.85קישור למקור
SciCode
מדידה עצמאית · לוח השוואה
לוח עצמאי
37.30.85קישור למקור
SWE-bench Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
53.50.72קישור למקור
SWE-bench Multilingual
מדד משני
לפי דיווח היצרן
71.30.42קישור למקור
NL2Repo
מדד משני
לפי דיווח היצרן
36.20.42קישור למקור

לא נמצאו תוצאות עבור: SWE-rebench · Aider Polyglot · MirrorCode · SWE-bench Lite · CursorBench · Vibe Code Bench · DeepSWE · FrontierCode 1.1 · ProgramBench

עבודה בשורת פקודה

מבחן הערכהסטטוסציוןמשקלמקור
Terminal-Bench 2.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
59.30.85קישור למקור

לא נמצאו תוצאות עבור: Terminal-Bench 3.0

עמידה בהוראות

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Instruction Following
מדידה עצמאית · מתעדכן
לוח עצמאי
53.21.00קישור למקור

לא נמצאו תוצאות עבור: IFBench · IFEval · MAXIFE

תוצרים מקצועיים

מבחן הערכהסטטוסציוןמשקלמקור
Gert Labs
מדד משני · בהסתייגותהערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לוח עצמאי
54.80.40קישור למקור

לא נמצאו תוצאות עבור: JobBench

כתיבת קוד עצמאית

מבחן הערכהסטטוסציוןמשקלמקור
LiveBench
מדידה עצמאית · מתעדכןזיקה מסחרית מוצהרת
לוח עצמאי
64.01.00קישור למקור
LiveBench Agentic Coding
מדידה עצמאית · מתעדכן
לוח עצמאי
39.31.00קישור למקור
Terminal-Bench 2.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
59.30.85קישור למקור
SWE-bench Pro
מדידה עצמאית · לוח השוואה
לפי דיווח היצרן
53.50.72קישור למקור

לא נמצאו תוצאות עבור: Terminal-Bench 3.0 · CursorBench · Vibe Code Bench · DeepSWE

מערכות נוספות

להשוואה

Apodex 1.1Celeris-1ChatGPTClaudeClaude CodeClaude Fable 5Claude Fable 5.1Claude Haiku 5.5Claude Opus 4.6Claude Opus 4.7Claude Opus 4.7 (Adaptive)Claude Opus 4.8Claude Opus 5Claude Opus 5.5Claude Sonnet 4.6Claude Sonnet 5Claude Sonnet 5.5Command A+CursorDeepSeek-R1DeepSeek R1 Distill Qwen 32BDeepSeek V3DeepSeek V3 0324DeepSeek V3.1DeepSeek V3.1 (Reasoning)DeepSeek V3.2DeepSeek V4.1 Flash 1017DeepSeek V4 Flash Vision ExpDeepSeek V4 Pro 0813DevinExaone 4.0 32BGemini 2.5 FlashGemini 2.5 ProGemini 3.1 ProGemini 3.5 FlashGemini 3.5 Flash-LiteGemini 3.6 FlashGemini 3.7 FlashGemini 3.8 FlashGemini 3 FlashGemini 3 ProGemini 4 ArgonGeminiNano Banana 2.1Gemma 4 26B A4BGitHub CopilotGLM-4.5-AirGLM-4.6GLM-4.7GLM-4.7-FlashGLM-5GLM-5.1GLM-5.2GLM-5.3GLM-5.3-FlashGLM 5.3 PrimeGLM-5-TurboGLM-5V-TurboGPT-5.1GPT-5.2GPT-5.3 CodexGPT-5.4GPT-5.5GPT-5.6 LunaGPT-5.6 SolGPT-5.6 TerraGPT-6.1 SolGPT-6.1 TerraGPT-6.1 Terra ProGPT-6 AstraGPT-6 LunaGPT-6 SolGranite-4.0-350MGranite-4.0-H-1BGranite-4.0-H-350MGranite 4.2 8BGrok 4Grok 4.1 FastGrok 4.1 Fast (Reasoning)Grok 4.3Grok 4.5Grok 4.6Grok 4.7Grok 4 Fast (Reasoning)GrokGrok Code Fast 1Hy3Hy3 PreviewInklingInkling-SmallInstinctK-ExaoneKimi K2.6Kimi K2Kimi K2.5Kimi K2.5 (Reasoning)Kimi K2.7 CodeKimi K3LFM2.5-2.6BLFM2.5-8B-A1BLing 2.6 FlashLing 3.0 FlashLing 3.0 Flash VLLing 3.1 FlashManusMercury 2Mercury 2.5Meta AIMicrosoft CopilotMiMo-V2.5-ProMiMo-V2.6-FlashMiMo-V2.6-ProMiMo-V2-FlashMiMo-V2-OmniMiMo-V2-ProMiniMax M2.5MiniMax M2.7MiniMax M3MiniMax M3.1 FlashMistral Large 2Mistral Large 3Mistral Large 4Le ChatMistral Medium 3Mistral Medium 3.5 128BMistral Small 4Muse Glimmer 30BMuse SparkMuse Spark 1.1Muse Spark 1.2Muse Spark OpenMuse WonderMuse Wonder FullNemotron 3.5 Bolt 74B-A9BNemotron 3.5 LightningNemotron 3.5 Super VLNemotron 3.5 Super VL 120B A12BNemotron 3 Nano Omni 30B A3BNemotron 3 UltraNova ProCodexDotsPerplexityPhi-4Quasar 438BQwen3.5-122B-A10BQwen3.5-27BQwen3.5-35B-A3BQwen3.5 397BQwen3.6-35B-A3BQwen 3.6 Max (preview)Qwen3.6 PlusQwen3.7 FlashQwen3.7 MaxQwen3.7 PlusQwen3.8 2.4T A95BQwen3.8-27BQwen3.8 FlashQwen3.8-Flash-NextQwen3.8 Max PrimeQwen3.8 Omni FlashBeam 1.0 501B-A23BSarvam 105BSarvam 30BSolar Pro 2Solar Pro 3Step 3.5 FlashStep 3.7 FlashStep 5 PreviewSwitchyardTrinity-Large-Thinking