דובר וירטואלי (MVP)
נציג AI שידבר בשמכם כדי לפתור את הבעיות שלכם
תיאור
זהו קצה עורפי שמקבל טקסט מהדיבור של שיחת הטלפון, ממיר אותו לפעולות ומבצע את הפעולות האלה. התהליך הוא:
- המשתמש מתקשר למספר ומבקש לבצע פעולה כלשהי ('לתת הודעה לבית הספר')
- המערכת, באמצעות Gemini API, שואלת את כל הפרטים הנדרשים לביצוע הפעולה (כמו שמות, מספרי טלפון, כתובות וכו')
- כשהמערכת מקבלת את כל הפרטים, השיחה מסתיימת
- לאחר מכן המערכת בודקת את השיחה (באמצעות Gemini API) וממירה אותה לפעולות (ומתעדת הערות מהפרטים החשובים)
- לאחר מכן המערכת מבצעת את הפעולה (מתקשרת החוצה) ומדברת עם האדם המטרה של הפעולה
- כשהמערכת מקבלת את המידע הדרוש כדי להתייחס לפעולה כאל פעולה שהושלמו, השיחה החוצה מסתיימת
- בסיום, המערכת מתקשרת חזרה למשתמש עם סיכום של הפעולה
ממשק ה-API של Gemini משמש לעיבוד כל הטקסט/הצ'אט:
- הטקסט מהשיחה בטלפון
- הסיבה לבדיקה ולהמרה של הצ'אט לפעולות
- הסיבה לבדיקה ולהמרה של הצ'אט להערות
- הסיבה לבדיקה ולהמרה של הצ'אט לסיכום לשיחה החוזרת
מבוסס על
- Firebase
קבוצה
על ידי
פליפה גאלו
מאת
ברזיל