Xylia

Działanie

Xylia to zaawansowany asystent AI do spotkań, który korzysta z Gemini jako podstawy, aby wypełniać luki w wiedzy na spotkaniach i optymalizować produktywność. Najważniejsze funkcje:
1. Przetwarzanie zapytań w czasie rzeczywistym: Xylia przesyła transkrypcje Google Meet i korzysta z czatu z historią Gemini, aby udzielać odpowiedzi w czasie rzeczywistym podczas spotkań. Pytania są analizowane pod kątem kontekstu, a potem przetwarzane za pomocą wektorów semantycznych Gemini, aby pobrać odpowiednie dokumenty z Firestore za pomocą wyszukiwania opartego na KNN.
2. Inteligentne prompty: do promptów stosujemy podejście hybrydowe, wykorzystujące małe i duże modele językowe. System SLM oparty na otwartym kodzie źródłowym wykrywa pytania bez odpowiedzi, które są następnie przetwarzane przez Gemini w celu udzielenia precyzyjnych odpowiedzi. To hybrydowe podejście pomaga optymalizować koszty i skuteczność.
3. Analiza treści wizualnych: interfejs Vision API usługi Gemini odpowiada na pytania dotyczące treści prezentacji, takich jak diagramy, i integruje te dane w sesji czatu, aby zwiększyć świadomość kontekstu.
4. Szczegółowe podsumowania: po spotkaniu Xylia generuje szczegółowe podsumowania i działania do wykonania za pomocą Gemini, co zapewnia uwzględnienie wszystkich kluczowych kwestii.
5. Zaawansowane funkcje wyszukiwania: czatbot na stronie internetowej korzysta z generowania wspomaganego wyszukiwaniem (RAG) do wyszukiwania wcześniejszych transkrypcji i dokumentów. Dokumenty są pobierane za pomocą interfejsu Notion API, konwertowane na elementy osadzone i przesyłane do Firestore w celu uzyskania odpowiednich informacji.