מילון מונחי AI
מה זה בנצ'מרק?
מבחן ביצועים (בנצ'מרק)Benchmark
מבחן סטנדרטי שמשמש להשוואה בין מודלי AI, למשל במתמטיקה, בתכנות, בהבנת שפה או בהסקה.
הסבר בפשטות
כשחברה משיקה מודל חדש היא מפרסמת לרוב טבלה של ציונים במבחנים מוכרים. המבחנים מאפשרים השוואה מספרית בין מודלים על אותן שאלות בדיוק.
הציונים שימושיים, אבל לא מספרים את כל הסיפור: מודל יכול להצטיין במבחן ולהתקשות במשימה שלכם, במיוחד בעברית. הדרך הטובה ביותר לבחור מודל לעסק היא לבדוק אותו על דוגמאות אמיתיות מהעבודה.