Что он делает

1PUL (1st Place You Look, произносится как «ван пул») — это веб-приложение Flutter (прототип), которое ведет инвентаризацию предметов, перемещенных людьми, и имеет интерфейс для поиска по инвентарю. В среде с большим количеством предметов и большим количеством вариантов хранения (например, оживленное домашнее хозяйство или офис) может быть сложно 1) отследить последнее место, где был замечен предмет, и 2) иметь в виду все предметы при попытке решить проблему или выполнить список. 1PUL также можно использовать для активной инвентаризации коллекции предметов.
Когда код Flutter обнаруживает движение с камеры путем сравнения кадров, он обращается к API Gemini с кадром камеры и запросом типа «если есть человек, держащий объект, и объект четко виден, опишите объект». Описание объекта Gemini, а также URL-адрес неподвижного изображения, местоположение камеры и (необязательно) транскрибированные звуковые комментарии от человека записываются в Google Sheet. Неподвижное изображение загружается в контейнер GCS. Устройство захвата, работающее под управлением 1PUL, также кратко покажет, что элемент инвентаризируется.
Поиск по инвентарю — это функция, которая отправляет запрос пользователя (например: «какое у меня есть снаряжение для кемпинга», «где мой торцевой ключ») в API Gemini вместе с полными описаниями инвентаря (спасибо за огромное контекстное окно!), с подсказкой типа «сопоставьте этот запрос пользователя с наиболее релевантными описаниями предметов». Есть некоторые подсказки для получения структурированного вывода, который код dart сопоставляет с предметами инвентаря для представления пользователю.

Что он делает

1PUL (1st Place You Look, произносится как «ван пул») — это веб-приложение Flutter (прототип), которое ведет инвентаризацию предметов, перемещенных людьми, и имеет интерфейс для поиска по инвентарю. В среде с большим количеством предметов и большим количеством вариантов хранения (например, оживленное домашнее хозяйство или офис) может быть сложно 1) отследить последнее место, где был замечен предмет, и 2) иметь в виду все предметы при попытке решить проблему или выполнить список. 1PUL также можно использовать для активной инвентаризации коллекции предметов.
Когда код Flutter обнаруживает движение с камеры путем сравнения кадров, он обращается к API Gemini с кадром камеры и запросом типа «если есть человек, держащий объект, и объект четко виден, опишите объект». Описание объекта Gemini, а также URL-адрес неподвижного изображения, местоположение камеры и (необязательно) транскрибированные звуковые комментарии от человека записываются в Google Sheet. Неподвижное изображение загружается в контейнер GCS. Устройство захвата, работающее под управлением 1PUL, также кратко покажет, что элемент инвентаризируется.
Поиск по инвентарю — это функция, которая отправляет запрос пользователя (например: «какое у меня есть снаряжение для кемпинга», «где мой торцевой ключ») в API Gemini вместе с полными описаниями инвентаря (спасибо за огромное контекстное окно!), с подсказкой типа «сопоставьте этот запрос пользователя с наиболее релевантными описаниями предметов». Есть некоторые подсказки для получения структурированного вывода, который код dart сопоставляет с предметами инвентаря для представления пользователю.

Что он делает

1PUL (1st Place You Look, произносится как «ван пул») — это веб-приложение Flutter (прототип), которое ведет инвентаризацию предметов, перемещенных людьми, и имеет интерфейс для поиска по инвентарю. В среде с большим количеством предметов и большим количеством вариантов хранения (например, оживленное домашнее хозяйство или офис) может быть сложно 1) отследить последнее место, где был замечен предмет, и 2) иметь в виду все предметы при попытке решить проблему или выполнить список. 1PUL также можно использовать для активной инвентаризации коллекции предметов.
Когда код Flutter обнаруживает движение с камеры путем сравнения кадров, он обращается к API Gemini с кадром камеры и запросом типа «если есть человек, держащий объект, и объект четко виден, опишите объект». Описание объекта Gemini, а также URL-адрес неподвижного изображения, местоположение камеры и (необязательно) транскрибированные звуковые комментарии от человека записываются в Google Sheet. Неподвижное изображение загружается в контейнер GCS. Устройство захвата, работающее под управлением 1PUL, также кратко покажет, что элемент инвентаризируется.
Поиск по инвентарю — это функция, которая отправляет запрос пользователя (например: «какое у меня есть снаряжение для кемпинга», «где мой торцевой ключ») в API Gemini вместе с полными описаниями инвентаря (спасибо за огромное контекстное окно!), с подсказкой типа «сопоставьте этот запрос пользователя с наиболее релевантными описаниями предметов». Есть некоторые подсказки для получения структурированного вывода, который код dart сопоставляет с предметами инвентаря для представления пользователю.

Что он делает

1PUL (1st Place You Look, произносится как «ван пул») — это веб-приложение Flutter (прототип), которое ведет инвентаризацию предметов, перемещенных людьми, и имеет интерфейс для поиска по инвентарю. В среде с большим количеством предметов и большим количеством вариантов хранения (например, оживленное домашнее хозяйство или офис) может быть сложно 1) отследить последнее место, где был замечен предмет, и 2) иметь в виду все предметы при попытке решить проблему или выполнить список. 1PUL также можно использовать для активной инвентаризации коллекции предметов.
Когда код Flutter обнаруживает движение с камеры путем сравнения кадров, он обращается к API Gemini с кадром камеры и запросом типа «если есть человек, держащий объект, и объект четко виден, опишите объект». Описание объекта Gemini, а также URL-адрес неподвижного изображения, местоположение камеры и (необязательно) транскрибированные звуковые комментарии от человека записываются в Google Sheet. Неподвижное изображение загружается в контейнер GCS. Устройство захвата, работающее под управлением 1PUL, также кратко покажет, что элемент инвентаризируется.
Поиск по инвентарю — это функция, которая отправляет запрос пользователя (например: «какое у меня есть снаряжение для кемпинга», «где мой торцевой ключ») в API Gemini вместе с полными описаниями инвентаря (спасибо за огромное контекстное окно!), с подсказкой типа «сопоставьте этот запрос пользователя с наиболее релевантными описаниями предметов». Есть некоторые подсказки для получения структурированного вывода, который код dart сопоставляет с предметами инвентаря для представления пользователю.