מערכת שנבדקה

DeepSeek V4.1 Flash 1017

נבדק כמודל APIמודל פתוחDeepSeek

מודל פתוח של DeepSeek עם חלון הקשר של 1,000K טוקנים. ציון האיכות הכולל שלו במבחני ההערכה עומד על 65.6.

ציונים לפי יכולת
ידע וחשיבה
כיסוי 27%
80.5
חשיבה מדעית
כיסוי 56%
72.5
מתמטיקה
כיסוי 7%
67.4
תהליכי עבודה בארגון
כיסוי 43%
60.5
קוד ופיתוח תוכנה
כיסוי 15%
55.6
כתיבת קוד עצמאית
כיסוי 19%
45.7
דיוק עובדתי
כיסוי 33%
42.9
הבנת תמונות ומסמכים חזותיים
כיסוי 33%
42.6
ביצוע משימות מרובות שלבים
כיסוי 19%
39.0
מחקר ברשת
כיסוי 18%
35.4
חשיבה מופשטת
כיסוי 47%
31.0
עבודה בשורת פקודה
כיסוי 43%
30.0
תוצאות

כל תוצאות המבחנים (15)

ידע וחשיבה

מבחן הערכהסטטוסציוןמשקלמקור
GPQA / GPQA Diamond
מדידה עצמאית · לוח השוואה
לוח עצמאי
93.20.85קישור למקור
Humanity's Last Exam (HLE)
מדידה עצמאית · לוח השוואההערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לפי דיווח היצרן
42.60.28קישור למקור

לא נמצאו תוצאות עבור: LiveBench · LiveBench Reasoning · MMLU-Pro · SuperGPQA · MMLU-Redux

חשיבה מדעית

מבחן הערכהסטטוסציוןמשקלמקור
GPQA / GPQA Diamond
מדידה עצמאית · לוח השוואה
לוח עצמאי
93.20.85קישור למקור
SciCode
מדידה עצמאית · לוח השוואה
לוח עצמאי
51.90.85קישור למקור

לא נמצאו תוצאות עבור: SuperGPQA · CritPt

מתמטיקה

מבחן הערכהסטטוסציוןמשקלמקור
FrontierMath v2
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לוח עצמאי
67.40.40קישור למקור

לא נמצאו תוצאות עבור: LiveBench · LiveBench Mathematics · AIME 2026 · HMMT Feb 2026 · MATH Level 5 · MathVision

תהליכי עבודה בארגון

מבחן הערכהסטטוסציוןמשקלמקור
AutomationBench
מדד משני
לפי דיווח היצרן
60.50.42קישור למקור

לא נמצאו תוצאות עבור: OfficeQA Pro

קוד ופיתוח תוכנה

מבחן הערכהסטטוסציוןמשקלמקור
SciCode
מדידה עצמאית · לוח השוואה
לוח עצמאי
51.90.85קישור למקור
NL2Repo
מדד משני
לפי דיווח היצרן
68.20.42קישור למקור
DeepSWE
מדד משני
לפי דיווח היצרן
77.00.42קישור למקור
ProgramBench
מדד משני
לפי דיווח היצרן
29.10.42קישור למקור

לא נמצאו תוצאות עבור: LiveBench · SWE-bench Verified · SWE-rebench · LiveCodeBench · Aider Polyglot · LiveBench Coding · LiveBench Agentic Coding · MirrorCode · SWE-bench Pro · SWE-bench Lite · CursorBench · SWE-bench Multilingual · Vibe Code Bench · FrontierCode 1.1

כתיבת קוד עצמאית

מבחן הערכהסטטוסציוןמשקלמקור
Terminal-Bench 3.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
30.00.85קישור למקור
DeepSWE
מדד משני
לפי דיווח היצרן
77.00.42קישור למקור

לא נמצאו תוצאות עבור: LiveBench · Terminal-Bench 2.0 · LiveBench Agentic Coding · SWE-bench Pro · CursorBench · Vibe Code Bench

דיוק עובדתי

מבחן הערכהסטטוסציוןמשקלמקור
SimpleQA Verified
מדד משני · בהסתייגותזיקה מסחרית מוצהרת
לוח עצמאי
42.90.40קישור למקור

לא נמצאו תוצאות עבור: SimpleQA · DeepSearchQA

הבנת תמונות ומסמכים חזותיים

מבחן הערכהסטטוסציוןמשקלמקור
Humanity's Last Exam (HLE)
מדידה עצמאית · לוח השוואההערכה על ידי מודל אחרזיקה מסחרית מוצהרת
לפי דיווח היצרן
42.60.72קישור למקור

לא נמצאו תוצאות עבור: MMMU-Pro · MMMU

ביצוע משימות מרובות שלבים

מבחן הערכהסטטוסציוןמשקלמקור
Terminal-Bench 3.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
30.00.85קישור למקור
Agents' Last Exam
מדד משני
לפי דיווח היצרן
35.40.42קישור למקור
AutomationBench
מדד משני
לפי דיווח היצרן
60.50.42קישור למקור

לא נמצאו תוצאות עבור: Berkeley Function Calling Leaderboard (BFCL) V4 · Terminal-Bench 2.0 · OSWorld · MCP Atlas · Toolathlon · AndroidWorld · WideResearch · JobBench · DeepSearchQA · MLE-bench · Gert Labs · Claw-Eval

מחקר ברשת

מבחן הערכהסטטוסציוןמשקלמקור
Agents' Last Exam
מדד משני
לפי דיווח היצרן
35.40.42קישור למקור

לא נמצאו תוצאות עבור: WebArena-Verified · WideResearch · BrowseComp · DeepSearchQA

חשיבה מופשטת

מבחן הערכהסטטוסציוןמשקלמקור
ARC-AGI-3
מדידה עצמאית · לוח השוואה
לוח עצמאי
3.30.85קישור למקור
ARC-AGI-2
מדד משניזיקה מסחרית מוצהרת
לוח עצמאי
78.10.50קישור למקור

לא נמצאו תוצאות עבור: LiveBench Reasoning · ZeroBench

עבודה בשורת פקודה

מבחן הערכהסטטוסציוןמשקלמקור
Terminal-Bench 3.0
מדידה עצמאית · מתעדכן
לפי דיווח היצרן
30.00.85קישור למקור

לא נמצאו תוצאות עבור: Terminal-Bench 2.0

מערכות נוספות

להשוואה

Apodex 1.1Celeris-1ChatGPTClaudeClaude CodeClaude Fable 5Claude Fable 5.1Claude Haiku 5.5Claude Opus 4.6Claude Opus 4.7Claude Opus 4.7 (Adaptive)Claude Opus 4.8Claude Opus 5Claude Opus 5.5Claude Sonnet 4.6Claude Sonnet 5Claude Sonnet 5.5Command A+CursorDeepSeek-R1DeepSeek R1 Distill Qwen 32BDeepSeek V3DeepSeek V3 0324DeepSeek V3.1DeepSeek V3.1 (Reasoning)DeepSeek V3.2DeepSeek V4 Flash Vision ExpDeepSeek V4 Pro 0813DevinExaone 4.0 32BGemini 2.5 FlashGemini 2.5 ProGemini 3.1 ProGemini 3.5 FlashGemini 3.5 Flash-LiteGemini 3.6 FlashGemini 3.7 FlashGemini 3.8 FlashGemini 3 FlashGemini 3 ProGemini 4 ArgonGeminiNano Banana 2.1Gemma 4 26B A4BGitHub CopilotGLM-4.5-AirGLM-4.6GLM-4.7GLM-4.7-FlashGLM-5GLM-5.1GLM-5.2GLM-5.3GLM-5.3-FlashGLM 5.3 PrimeGLM-5-TurboGLM-5V-TurboGPT-5.1GPT-5.2GPT-5.3 CodexGPT-5.4GPT-5.5GPT-5.6 LunaGPT-5.6 SolGPT-5.6 TerraGPT-6.1 SolGPT-6.1 TerraGPT-6.1 Terra ProGPT-6 AstraGPT-6 LunaGPT-6 SolGranite-4.0-350MGranite-4.0-H-1BGranite-4.0-H-350MGranite 4.2 8BGrok 4Grok 4.1 FastGrok 4.1 Fast (Reasoning)Grok 4.3Grok 4.5Grok 4.6Grok 4.7Grok 4 Fast (Reasoning)GrokGrok Code Fast 1Hy3Hy3 PreviewInklingInkling-SmallInstinctK-ExaoneKimi K2.6Kimi K2Kimi K2.5Kimi K2.5 (Reasoning)Kimi K2.7 CodeKimi K3LFM2.5-2.6BLFM2.5-8B-A1BLing 2.6 FlashLing 3.0 FlashLing 3.0 Flash VLLing 3.1 FlashManusMercury 2Mercury 2.5Meta AIMicrosoft CopilotMiMo-V2.5-ProMiMo-V2.6-FlashMiMo-V2.6-ProMiMo-V2-FlashMiMo-V2-OmniMiMo-V2-ProMiniMax M2.5MiniMax M2.7MiniMax M3MiniMax M3.1 FlashMistral Large 2Mistral Large 3Mistral Large 4Le ChatMistral Medium 3Mistral Medium 3.5 128BMistral Small 4Muse Glimmer 30BMuse SparkMuse Spark 1.1Muse Spark 1.2Muse Spark OpenMuse WonderMuse Wonder FullNemotron 3.5 Bolt 74B-A9BNemotron 3.5 LightningNemotron 3.5 Super VLNemotron 3.5 Super VL 120B A12BNemotron 3 Nano Omni 30B A3BNemotron 3 UltraNova ProCodexDotsPerplexityPhi-4Quasar 438BQwen3.5-122B-A10BQwen3.5-27BQwen3.5-35B-A3BQwen3.5 397BQwen3.6-27BQwen3.6-35B-A3BQwen 3.6 Max (preview)Qwen3.6 PlusQwen3.7 FlashQwen3.7 MaxQwen3.7 PlusQwen3.8 2.4T A95BQwen3.8-27BQwen3.8 FlashQwen3.8-Flash-NextQwen3.8 Max PrimeQwen3.8 Omni FlashBeam 1.0 501B-A23BSarvam 105BSarvam 30BSolar Pro 2Solar Pro 3Step 3.5 FlashStep 3.7 FlashStep 5 PreviewSwitchyardTrinity-Large-Thinking