DeepLook

Fungsinya

DeepLook adalah platform inovatif yang menggunakan model Gemini untuk menambahkan fungsi AI Generatif ke analisis dan pengawasan video. Fungsi ini berkisar dari mengontrol antarmuka UI melalui chat atau suara hingga analisis video cerdas dan deteksi peristiwa di kamera. DeepLook dapat melakukan tugas menggunakan bahasa alami, seperti membuka kamera dengan cepat, mengakses rekaman, dan mengekspor video tanpa menggunakan menu dan widget yang sulit ditemukan. Yang terpenting, melalui analisis Vision, Anda dapat melakukan Tanya Jawab di kamera live, meringkas rekaman sebelumnya, mendeteksi objek, dan bahkan memberi tahu keluarga tentang kondisi orang yang tinggal sendiri. Selain itu, fitur ini dapat memicu peristiwa berbasis kalimat, seperti, "Apakah seseorang terjatuh?", "Beri tahu jika senjata muncul" atau analisis situasional dalam konteks perawatan orang dewasa, seperti memantau orang lanjut usia.

Selain itu, DeepLook dapat memberi tahu pengguna jika peristiwa terdaftar terjadi dan menjalankan gerakan PTZ manual atau otomatis pada kamera, seperti otomatis memusatkan kamera pada objek bingkai yang ditentukan.
 
Sistem ini terutama berfungsi dengan flash Gemini karena rasio biaya-manfaatnya. Pemrosesan perintah sangat bergantung pada Panggilan Fungsi Vertex AI. Analisis gambar berfungsi dengan cuplikan video dan mosaik gambar bertingkat yang dikirimkan melalui perintah ke API model. DeepLook akan memiliki versi Web dan Android. Server dapat berjalan di Firebase App Host dan Cloud Run, menggunakan agen yang menghubungkan kamera secara lokal, yang berfungsi sebagai jembatan antara kamera dan server.