SimpleQA

מה הוא מודד

דיוק עובדתי: נכונות עובדתית, הימנעות מהמצאות והתבססות על מקור

מה הוא לא מודד

• אין לגזור ממנו יכולת בתחומים שלא נכללו במשימות שלו.
• הציון נקבע בהערכה על ידי מודל אחר ולכן משקלו מוגבל בתוך היכולת.

הערות על המבחן

Vendor-authored; never sole/independent evidence.

תוצאות שנמדדו