DeepLook

用途

DeepLook 是採用 Gemini 模型的創新平台，可為錄影監控和分析功能新增生成式 AI 功能。這些功能包括透過即時通訊或語音控制使用者介面，以及攝影機的智慧影像分析和事件偵測功能。DeepLook 可使用自然語言執行任務，例如快速開啟攝影機、存取錄影內容，以及匯出影片，完全不必使用選單和難以找到的小工具。最重要的是，透過 Vision 視覺分析功能，你可以對即時攝影機進行問答、匯總過去的錄影內容、偵測物體，甚至讓家人知道獨居者目前的情況。此外，它還能觸發句子型事件，例如「有人跌倒了嗎？」「出現武器時發出警報」或針對成人照護 (例如監控老人) 進行情境分析。

此外，如果發生已註冊的事件，DeepLook 會通知使用者，並在攝影機上執行手動或自動 PTZ 動作，例如自動將攝影機對準特定影格物件。
 
由於 Gemini-flash 的效益/成本比高，因此系統主要採用這項技術。指令的剖析作業極度仰賴 Vertex AI 函式呼叫。圖像分析功能可透過提示，將影片片段和圖片馬賽克圖案提交至模型 API。DeepLook 將推出網頁版和 Android 版。伺服器可在 Firebase App Host 和 Cloud Run 上執行，使用在本機連線攝影機的代理程式，做為攝影機和伺服器之間的橋樑。