פתיחת העוזר האישי הרב-מודלי

תיאור

שכחו את הסיכות הלא נוחות של ה-AI! כבר יש לכם את הפוטנציאל להפוך את הסמארטפון או השעון החכם למרכז ה-AI האישי שלכם. הפרויקט הזה בקוד פתוח מנצל את מלוא העוצמה של AI גנרטיבי, יכולות מולטימודליות, קריאות לפונקציות של כלים בכמה שלבים ו-RAG (יצירה משופרת של אחזור) לצורך התאמה אישית וזיכרונות רלוונטיים, כדי להפוך את המכשירים הקיימים שלכם למלווים חכמים. בסרטון אני מדגים את המצבים הבאים: שיחת וידאו (כולל קריאות פונקציה ו-RAG), שיחת תמונה, תרגום תמונה ותרגום מיוחד (מצב זיהוי אוטומטי של Chirp ל-STT). אני מדגימה איך להתאים אישית את המלווה בקלות. ממשק המשתמש העיקרי הוא קול או תמונה.