Everies

기능

Gemini 기술을 기반으로 하는 everies 앱을 사용하면 주변 물체에 독특하고 재미있는 양방향 캐릭터 'everies'가 생생하게 표시됩니다. 카메라로 주변 물체를 스캔하기만 하면 물체에 에버리즈의 눈이 표시됩니다.
이 눈을 탭하면 특정 객체, 환경, 맥락에 맞게 조정된 고유한 개성, 외모, 대화, 목소리를 가진 캐릭터가 생성됩니다. 눈이 처음에 표시되지 않더라도 객체를 탭하여 모든 문자를 생성할 수도 있습니다.
모든 캐릭터가 음성 입력을 통해 연속 대화에 참여할 수 있으므로 상호작용이 향상됩니다. 좋아하는 everies와 기억에 남는 장면을 저장할 수도 있습니다.

everies의 '모든 것'을 양방향의 재미있는 캐릭터로 바꾸는 고유한 기능은 LLM 기술의 돋보이는 특징으로, 환경을 간소화하고 더 사용자 친화적으로 만듭니다. 이 프로세스는 TensorFlow Lite를 기반으로 하는 객체 감지와 JSON 파일을 통한 문자 생성을 통해 Gemini API에 의해 자동화됩니다. 눈 위치는 AR과 결합된 기기 내 객체 감지를 사용하여 높은 프레임 속도로 결정됩니다. ARCore는 캐릭터의 눈과 얼굴을 고정하고, 고프레임 속도 감지와 다중 모달 LLM (Gemini)은 빠른 응답과 고품질 환경을 보장합니다.

현재 개념 증명으로 베타 버전인 everies는 좋아하는 everies와의 연속 대화 및 동영상 녹화 기능을 비롯한 향후 업데이트와 함께 정식 버전을 출시하는 것을 목표로 하고 있습니다.