EyeHear

Ý nghĩa

EyeHear sử dụng API Gemini để giúp người khiếm thị sử dụng được chuông cửa có camera. Gemini tạo nội dung mô tả chi tiết bằng văn bản về video chuông cửa bằng cách sử dụng câu lệnh đa phương thức. Sau đó, các nội dung mô tả dạng văn bản này sẽ được chuyển đổi thành âm thanh và tự động phát trong trình duyệt. Điều này cho phép người dùng "nghe" những gì đang diễn ra trước cửa, bao gồm cả việc xác định người, gói hàng hoặc các sự kiện khác. Siêu dữ liệu mô tả video được lưu trữ trong Firebase cho mục đích nhật ký và có thể là mục đích phân tích.