DEN

Działanie

Inteligentny asystent AI, który wykorzystuje interfejs Gemini API, aby zwiększyć użyteczność i interaktywność urządzeń z Androidem.
Funkcje:
Inteligentny chatbot: komunikuje się za pomocą głosu, tekstu i wizualnych danych wejściowych, co ułatwia interakcję na różne sposoby.
Wizualna interakcja: korzysta z kamery telefonu, aby widzieć i wydawać odpowiedzi. Wykonuje zrzuty ekranu, aby zrozumieć, co znajduje się na ekranie.
Komendy głosowe: pozwala użytkownikom wykonywać zadania, zadawać pytania i prowadzić rozmowy głosowe.
Odtwarzanie muzyki: może odtwarzać muzykę na urządzeniu, tak jak głośnik inteligentny.
Pomoc kontekstowa: może odpowiadać na pytania na podstawie kalendarza, lokalizacji, regionu itp.
Kamera na żywo: funkcja w aplikacji, która umożliwia użytkownikom prowadzenie rozmów z użyciem kontekstu wizualnego.
Internet i sieć: może uzyskać dostęp do internetu i wyszukiwać w Google, aby dostarczać informacji w czasie rzeczywistym.
Mapy: wyświetla wskazówki dojazdu w czasie rzeczywistym i umożliwia wyszukiwanie miejsc.
Pamięć: wbudowana pamięć, która zapamiętuje ważne szczegóły, aby udzielać trafnych odpowiedzi na podstawie wcześniejszych interakcji.
Pomoc na Androidzie: zapewnia pomoc na Androidzie w czasie rzeczywistym.
Modele:
DEN: koncentruje się na poleceniach głosowych i sterowaniu.
LISA: specjalizuje się w rozmowach tekstowych.
Pomoc na Androidzie: pomaga w rozwiązywaniu problemów z systemem Android.
Vision: obsługuje dane wizualne.

Aplikacja korzysta z interfejsu Gemini API jako chatbot wielomodalny. Używa narzędzi funkcyjnych do generowania ustrukturyzowanych odpowiedzi, które są używane w usługach zewnętrznych.
Aplikacja ma możliwość sekwencyjnego korzystania z funkcji narzędzi. Wykorzystuje tę funkcję do wykonywania złożonych zadań z wieloma funkcjami.