מבחן הערכה
MCP Atlas
מדד משני
מה הוא מודד
שימוש בכלים: קריאה נכונה לפונקציות וממשקים חיצוניים · ביצוע משימות מרובות שלבים: ביצוע משימה רב שלבית מקצה לקצה
מה הוא לא מודד
- אין לגזור ממנו יכולת בתחומים שלא נכללו במשימות שלו.
הערות על המבחן
קריאות כלים דרך פרוטוקול MCP במשימות מרובות שלבים.
תוצאות שנמדדו
| מערכת | ציון | פרוטוקול | מקור |
|---|---|---|---|
| Muse Spark Open | 89.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Muse Spark 1.1 | 88.1 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Claude Opus 5 | 85.8 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Step 5 Preview | 85.6 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Kimi K3 | 84.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Gemini 3.5 Flash | 83.6 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Ling 3.1 Flash | 83.0 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Claude Opus 4.8 | 82.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Beam 1.0 501B-A23B | 80.8 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Inkling-Small | 79.6 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Claude Opus 4.7 (Adaptive) | 77.3 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| GLM-5.2 | 76.8 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Qwen3.7 Max | 76.4 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Kimi K2.7 Code | 76.0 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Muse Glimmer 30B | 75.5 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| GPT-5.5 | 75.3 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| MiniMax M3 | 74.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Inkling | 74.1 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| DeepSeek V4 Pro 0813 | 73.6 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Qwen3.7 Plus | 73.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| GLM-5.1 | 71.8 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| GPT-5.4 | 70.6 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Ling 3.0 Flash | 65.5 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Qwen3.6-35B-A3B | 62.8 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| 57.7 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור | |
| 56.1 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור | |
| Kimi K2.6 | 55.9 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Nemotron 3.5 Bolt 74B-A9B | 52.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Qwen3.6 Plus | 48.2 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| Qwen3.5 397B | 46.1 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |
| 42.3 | MCP Atlas, שימוש בכלים דרך MCP · מקור לא מאומת | קישור | |
| GLM-5 | 31.1 | MCP Atlas, שימוש בכלים דרך MCP · מקור לא מאומת | קישור |
| Kimi K2.5 | 29.5 | MCP Atlas, שימוש בכלים דרך MCP · דיווח של הספק | קישור |