Виртуальный представитель (MVP)

Представитель ИИ, который выступает от вашего имени и решает ваши проблемы

Что он делает

Это бэкэнд, который получает текст из речи телефонного звонка, преобразует его в действия и выполняет эти действия. Поток такой:
- Пользователь звонит по номеру и выполняет действие («Позвонить в местную аптеку и узнать, есть ли у них лекарство от головной боли»)
- Система, используя API Gemini, запрашивает всю необходимую информацию для действия (например, имена, номера телефонов, адреса...)
- Когда система получит всю информацию, вызов будет завершен.
- Затем система просматривает вызов (используя Gemini API) и преобразует его в действия (и делает заметки из важной информации)
- После этого система выполняет действие (совершает исходящий звонок) и разговаривает с целевым лицом действия.
- Когда система получает информацию, необходимую для того, чтобы считать действие выполненным, исходящий вызов завершается.
- Наконец, система перезванивает пользователю и сообщает ему краткий обзор действия.

Для обработки всего текста/чата используется API Gemini:
- Текст телефонного звонка
- Обоснование необходимости пересмотра и преобразования чата в действия
- Обоснование необходимости просмотра и преобразования чата в заметки
- Обоснование необходимости просмотра и преобразования чата в резюме для обратного звонка

Построено с

  • Firebase

Команда

К

Фелиппе Галло

От

Бразилия