EyeTalk

Działanie

Nasza aplikacja to technologia wspomagająca, która pomaga głównie pacjentom z chorobą ALS. Stwardnienie boczne nerwu przedłużonego to neurodegeneracyjna choroba, która powoduje całkowite porażenie pacjenta. Wszystko, w tym usta, tułów i kończyny, jest sparaliżowane. Jedynymi częściami ciała, które mogą poruszać, są oczy i mięśnie policzków. ALS nie jest chorobą wrodzoną, co oznacza, że pacjent wychowywał się w normalnych warunkach, a nagle stracił zdolność do komunikowania się z bliskim. Aby temu zaradzić, główną funkcją aplikacji jest funkcja komunikacji, która wykorzystuje Google Gemini w innowacyjny sposób. Gdy ktoś rozmawia z użytkownikiem, aplikacja rejestruje jego głos. Ten zapis jest wykorzystywany przez Gemini do generowania odpowiednich odpowiedzi. Użytkownik może wtedy wybrać jedną z podanych odpowiedzi, wykonując proste ruchy oczami. Dzięki temu mogą komunikować się i wyrażać swoje uczucia nawet wtedy, gdy są całkowicie sparaliżowani i nie mogą mówić. Aby zapewnić użytkownikom większą niezależność, dodatkową funkcją aplikacji jest automatyka inteligentnego domu, która umożliwia sterowanie inteligentnymi urządzeniami domowymi, takimi jak wentylatory czy światła. Aplikacja kładzie też nacisk na bezpieczeństwo, oferując funkcję alertu, która umożliwia użytkownikowi powiadomienie opiekuna lub lekarza w przypadku nagłego wypadku. W przyszłości planujemy wprowadzić funkcje rozrywkowe dla użytkowników, ale przede wszystkim integrację z kamerą podczerwieni, która zwiększy dokładność śledzenia oczu w warunkach słabego oświetlenia.