เดอะ เบลนด์

การทำงาน

เราได้พัฒนาแอปวิทยุที่ฟังผู้ใช้ เข้าใจความต้องการของผู้ใช้ และอัลกอริทึมการแนะนำเพลงคือ NLP, Gemini LLM และอัลกอริทึมแนะนำเพลง จึงสร้างประสบการณ์การฟังวิทยุที่ปรับเปลี่ยนให้เหมาะกับผู้ใช้

เราใช้ Flutter ในการพัฒนาแอปที่แสดงต่อผู้ใช้ ซึ่งจะสื่อสารกับเซิร์ฟเวอร์ที่พัฒนาโดยใช้ Express เซิร์ฟเวอร์ Express นี้จะรับข้อความแจ้ง การแปลงข้อมูลเป็นโทเค็น สร้างการรวมที่เข้ากับผู้ใช้ และนำส่งให้ผู้ใช้ได้ทันท่วงที เซิร์ฟเวอร์ Express สื่อสารกับเซิร์ฟเวอร์อื่นที่พัฒนาโดยใช้ Flask Microservice ของ Flask จะจัดการการคัดลอกข้อมูล การสร้างสคริปต์สำหรับลิงก์โดยใช้ Gemini และทำให้สคริปต์มีชีวิตโดยใช้ Eleven Labs TTS เซิร์ฟเวอร์ทั้ง 2 เครื่องจะใช้ฐานข้อมูล MongoDB ร่วมกัน

Gemini ใช้ข้อมูลที่คัดลอกมาและพารามิเตอร์อื่นๆ หลายรายการ เช่น ช่วงเวลาของวันและอารมณ์ เพื่อสร้างสคริปต์สำหรับลิงก์ที่ RJ ควรพูด จากนั้นระบบจะส่งสคริปต์นี้ไปยัง Eleven Labs TTS API เพื่อสร้างข้อมูลเสียง ระบบจะประมวลผลข้อมูลเสียงเพื่อสร้างลิงก์สุดท้ายที่ปรับแต่งให้กับผู้ใช้โดยเฉพาะ