Juru Bicara Virtual (MVP)

Perwakilan AI yang berbicara atas nama Anda untuk menyelesaikan masalah Anda

Fungsinya

Ini adalah backend yang menerima teks dari ucapan panggilan telepon, mengubahnya menjadi tindakan, dan menjalankan tindakan tersebut. Alurnya adalah:
- Pengguna menelepon nomor dan memberikan tindakan ("Telepon apotek lokal dan periksa apakah mereka memiliki obat sakit kepala")
- Sistem, menggunakan Gemini API, meminta semua informasi yang diperlukan untuk tindakan tersebut (seperti nama, nomor telepon, alamat...)
- Saat sistem memiliki semua info, panggilan berakhir
- Kemudian sistem meninjau panggilan (menggunakan Gemini API) dan mengubahnya menjadi tindakan (dan membuat catatan dari info penting)
- Setelah itu, sistem mengeksekusi tindakan (melakukan panggilan keluar) dan berbicara dengan target orang tindakan
- Saat sistem mendapatkan informasi yang diperlukan untuk menganggap tindakan selesai, panggilan keluar berakhir
- Terakhir, sistem menelepon kembali pengguna dengan ringkasan dari tindakan tersebut

Gemini API digunakan untuk memproses semua teks/chat:
- Teks dari panggilan telepon
- Alasan untuk meninjau dan mengubah chat menjadi tindakan
- Alasan untuk meninjau dan mengubah chat menjadi catatan
- Alasan untuk meninjau dan mengubah chat menjadi ringkasan untuk panggilan balik

Dibuat dengan

  • Firebase

Tim

Oleh

Felippe Gallo

From

Brasil