Wingman AI

Zastosowanie

Wyobraź sobie, że jesteś w stanie rozmawiać z postaciami z AI w dowolnym miejscu i w dowolnym języku, a oni zareagują. Wyobraź sobie, że możesz kontrolować nie tylko ich osobowość i głos, ale też nauczyć je, jak wykonywać polecenia i wykorzystywać w grach wiedzę z zewnątrz.
Wingman AI to lokalna aplikacja klient-serwer, która działa w systemach Windows i macOS. Backend ma model open source i zapisany w języku Python, natomiast frontend jest aplikacją internetową o zamkniętym źródle. Interfejs jest łatwy w użyciu, więc zarówno fani sztucznej inteligencji, jak i gracze mogą korzystać z usług różnych dostawców AI, aby dostosować Wingmen do swoich potrzeb.
Wingman to połączenie promptów osobowości, zamiany tekstu na mowę, zamiany mowy na tekst i konfiguracji dostawcy LLM, definicji poleceń i umiejętności opcjonalnych.
Wingman AI Core zajmuje się syntezą mowy użytkownika, a następnie wysyła ją do Gemini, przetwarza odpowiedź i na koniec przetwarza ją w mową. Wykorzystuje wywołanie funkcji AI do wykonywania poleceń takich jak naciśnięcia klawiszy lub makra, które użytkownicy mogą rejestrować we frontendzie i uruchamiać bez konieczności poznawania dokładnych wyrażeń aktywacyjnych.
Umiejętności to w zasadzie dołączane niestandardowe skrypty/rozszerzenia Pythona, które pozwalają Wingmanowi uruchomić dowolny kod, którego można użyć do łączenia się z zewnętrznymi interfejsami API, pakietami SDK czy AI Vision.
Wingman AI nie jest ograniczony do Gemini, ale zintegrowaliśmy je jako dostawca pierwszej klasy od razu. Okazało się, że jest doskonałym modelem do obsługi złożonych promptów systemowych i długich rozmów. Jesteśmy pod wrażeniem jego możliwości podsumowywania.