Wingman AI

Działanie

Wyobraź sobie, że możesz rozmawiać z postaciami AI w dowolnym miejscu i w dowolnym języku, a one będą Ci odpowiadać. Wyobraź sobie, że możesz kontrolować nie tylko ich osobowość i głos, ale też uczyć ich, jak wykonywać polecenia w Twoim imieniu i wykorzystywać zewnętrzną wiedzę w grach.
Wingman AI to lokalna aplikacja kliencko-serwerowa, która działa w systemach Windows i macOS. Backend jest oprogramowaniem open source napisanym w Pythonie, a frontend to aplikacja internetowa z zamkniętym kodem źródłowym. Interfejs użytkownika jest łatwy w użyciu, więc zarówno fani AI, jak i gracze mogą korzystać z różnych dostawców AI, aby tworzyć własne Wingmen.
Wingmen to połączenie promptów dotyczących osobowości, konwersji tekst-mowa, konwersji mowę-tekst, konfiguracji dostawcy LLM, definicji poleceń i opcjonalnych umiejętności.
Wingman AI Core odpowiada za syntezę mowy użytkownika, a następnie wysyła ją do Gemini, przetwarza odpowiedź i na koniec przekształca ją z powrotem w mowę. Używa on funkcji wywoływania AI do wykonywania poleceń takich jak naciśnięcia klawiszy czy makra, które użytkownicy mogą nagrywać w interfejsie i uruchamiać bez konieczności zapamiętywania dokładnych fraz aktywacyjnych.
Umiejętności to w podstawie dołączane niestandardowe skrypty lub rozszerzenia Pythona, które umożliwiają Wingmanowi uruchamianie dowolnego kodu, który może służyć do łączenia się z zewnętrznymi interfejsami API, pakietami SDK, systemami AI itp.
Wingman AI nie jest ograniczony do Gemini, ale zintegrowaliśmy go jako dostawcę pierwszej klasy, gdy tylko uzyskaliśmy do niego dostęp. Okazało się, że jest to świetny model do obsługiwania złożonych promptów systemowych i długich rozmów. Jesteśmy też pod wrażeniem jego możliwości podsumowania.