מבחן הערכה
NL2Repo
מדד משני
מה הוא מודד
קוד ופיתוח תוכנה: כתיבת קוד נכון ועבודה בריפוזיטורי אמיתי
מה הוא לא מודד
- אינו בודק איכות עיצוב מערכת, אבטחה או תחזוקתיות לאורך זמן.
תוצאות שנמדדו
| מערכת | ציון | פרוטוקול | מקור |
|---|---|---|---|
| DeepSeek V4.1 Flash 1017 | 68.2 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| DeepSeek V4 Pro 0813 | 61.5 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| MiniMax M3.1 Flash | 61.2 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| GLM-5.3 | 58.0 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| GLM-5.3-Flash | 56.3 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| GLM-5.2 | 48.9 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.8-Flash-Next | 48.1 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.7 Max | 47.2 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| 43.2 | NL2Repo, בניית ריפוזיטורי מתיאור · מקור לא מאומת | קישור | |
| Qwen 3.6 Max (preview) | 42.9 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| GLM-5.1 | 42.7 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.8-27B | 42.3 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| MiniMax M3 | 42.1 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.7 Plus | 41.1 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| MiniMax M2.7 | 39.8 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.6 Plus | 37.9 | NL2Repo, בניית ריפוזיטורי מתיאור · מקור לא מאומת | קישור |
| Qwen3.6-27B | 36.2 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| GLM-5 | 35.9 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Qwen3.5 397B | 32.2 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |
| Kimi K2.5 | 32.0 | NL2Repo, בניית ריפוזיטורי מתיאור · מקור לא מאומת | קישור |
| Qwen3.6-35B-A3B | 29.4 | NL2Repo, בניית ריפוזיטורי מתיאור · דיווח של הספק | קישור |