Juru Bicara Virtual (MVP)
Perwakilan AI yang berbicara atas nama Anda untuk menyelesaikan masalah Anda
Fungsinya
Ini adalah backend yang menerima teks dari ucapan panggilan telepon, mengubahnya menjadi tindakan, dan menjalankan tindakan tersebut. Alurnya adalah:
- Pengguna menelepon nomor dan memberikan tindakan ("Telepon apotek lokal dan periksa apakah mereka memiliki obat sakit kepala")
- Sistem, menggunakan Gemini API, meminta semua informasi yang diperlukan untuk tindakan tersebut (seperti nama, nomor telepon, alamat...)
- Saat sistem memiliki semua info, panggilan berakhir
- Kemudian sistem meninjau panggilan (menggunakan Gemini API) dan mengubahnya menjadi tindakan (dan membuat catatan dari info penting)
- Setelah itu, sistem mengeksekusi tindakan (melakukan panggilan keluar) dan berbicara dengan target orang tindakan
- Saat sistem mendapatkan informasi yang diperlukan untuk menganggap tindakan selesai, panggilan keluar berakhir
- Terakhir, sistem menelepon kembali pengguna dengan ringkasan dari tindakan tersebut
Gemini API digunakan untuk memproses semua teks/chat:
- Teks dari panggilan telepon
- Alasan untuk meninjau dan mengubah chat menjadi tindakan
- Alasan untuk meninjau dan mengubah chat menjadi catatan
- Alasan untuk meninjau dan mengubah chat menjadi ringkasan untuk panggilan balik
Dibuat dengan
- Firebase
Tim
Oleh
Felippe Gallo
From
Brasil