מילון מונחי AI
מה זה AI רב-מודאלי?
Multimodal AI
מערכת AI שמבינה ומייצרת כמה סוגי מידע: טקסט, תמונות, קול ווידאו, ומשלבת ביניהם.
הסבר בפשטות
מודל רב-מודאלי יכול לקבל צילום של גרף ולהסביר אותו, לשמוע הקלטה ולסכם אותה, או לקבל טקסט ולהחזיר תמונה או קול. רוב מודלי הצ'אט המובילים היום רב-מודאליים.
השילוב פותח שימושים חדשים: לצלם מקרר ולקבל מתכון, לצלם שגיאה במסך ולקבל פתרון, או לנהל שיחה קולית רציפה עם עוזר. היכולות לא שוות בכל הסוגים, ומודל מצוין בטקסט יכול להיות בינוני בקריאת כתב יד בעברית.