פריסה והטמעה של מערכות AI
Hey MATLAB! AI Voice Assistant
עוזר קולי מבוסס AI ו-LLM המדגים מגוון שיטות לשילוב בינה מלאכותית
ב-MATLAB באמצעות תרחיש אחד מקצה לקצה.
מציגה:
מורן גולדמברג, ראש צוות LTC
התהליך ההנדסי:
בניית שרשרת עבודה מלאה הכוללת קליטת קול, עיבוד אודיו, שילוב מודלי AI ו-LLM, יצירת תשובה והצגתה למשתמש מתוך סביבת MATLAB.
המימוש בפועל:
המשתמש פונה לעוזר הקולי בשפה טבעית, המערכת ממירה דיבור לטקסט, שולחת את הבקשה למודל שפה, מעבדת את התשובה ומחזירה מענה אינטראקטיבי בזמן אמת.
טכנולוגיות מפתח:
MATLAB | ChatGPT/LLM | Speech-to-Text | AI Integration
תיאור הדמו:
בינה מלאכותית יוצרת (Generative AI) ומודלי שפה גדולים (LLMs) הפכו לטכנולוגיות מרכזיות במגוון רחב של יישומים, אך לעיתים לא ברור כיצד לשלב אותן בתהליכי פיתוח והנדסה קיימים.
בדמו זה נציג עוזר קולי פשוט המבוסס על ChatGPT, אשר משמש כפלטפורמה להצגת מגוון יכולות AI ב-MATLAB. המשתתפים יראו כיצד המערכת מאזינה לפקודה קולית, ממירה אותה לטקסט, מפעילה מודל שפה לקבלת תשובה ומחזירה תוצאה אינטראקטיבית, תוך חשיפת הגישות והכלים הזמינים למפתחי MATLAB.
מרכיבי הדמו:
- קליטת קול (Voice Capture): קבלת פקודות קוליות מהמשתמש באמצעות מיקרופון בזמן אמת.
- המרת דיבור לטקסט (Speech-to-Text): תמלול השאלה הקולית לפורמט טקסטואלי הניתן לעיבוד.
- שילוב מודל שפה (LLM Integration): שליחת השאילתה ל-ChatGPT או למודל שפה מתקדם וקבלת תשובה.
- אינטראקציה והצגת תוצאות: הצגת התשובה למשתמש ודיון בהרחבות אפשריות עבור יישומי AI הנדסיים.
דגשים טכניים:
- Generative AI ב-MATLAB: שימוש בממשקים מובנים לחיבור מודלי שפה ושירותי AI חיצוניים מתוך MATLAB.
- עיבוד שפה וקול מקצה לקצה: שילוב תהליכי Speech-to-Text, ניהול פרומפטים ויצירת תשובות מבוססות LLM.
- ארכיטקטורה מודולרית וגמישה: אפשרות להחליף מודלי AI, מקורות מידע או ממשקי משתמש בהתאם לצורכי הפרויקט.