Zentale

การทำงาน

Zentale เป็นแอป Android ที่แปลงรูปภาพของเล่นให้เป็นเรื่องราวสนุกๆ และให้ความรู้โดยใช้ Google Gemini Ai Api
แอปทำงานอย่างไร
ผู้ใช้สามารถเข้าสู่ระบบ Zentale โดยใช้บัญชี Google การลงชื่อเข้าใช้จะใช้เวลาไม่ถึง 2 วินาทีเมื่อใช้คลังการเขียนแบบ One Tap หากนี่เป็นการเข้าสู่ระบบครั้งแรกของผู้ใช้ ฉันมีฟังก์ชัน onCreate ของ Firebase ในแบ็กเอนด์ที่จะกำหนดเครดิตเรื่องราวแบบข้อความให้กับแต่ละบัญชีโดยอัตโนมัติ
เมื่อเข้าสู่ระบบแล้ว ผู้ใช้จะแปลงรูปภาพของเล่นเป็นเรื่องราวแบบข้อความได้ในขั้นตอนง่ายๆ ต่อไปนี้
1. ถ่ายรูปของเล่นใหม่หรือเพิ่มรูปภาพจากแกลเลอรี
ไม่บังคับ: เลือกภาษาเอาต์พุตสำหรับเรื่องราว ปัจจุบันคุณเลือกได้ระหว่างภาษาอังกฤษ สเปน และโรมาเนีย หากไม่ได้เลือก เรื่องราวจะเป็นภาษาอังกฤษ
2. กดสร้างเรื่องราวและรอการสร้าง
ในเบื้องหลัง เมื่อผู้ใช้แตะปุ่ม "สร้างเรื่องราว" ระบบจะดำเนินการต่อไปนี้
- เพิ่มรูปภาพของเล่นลงใน Firebase Storage ซึ่งจะแสดงผล URL รูปภาพ
- ฉันส่ง URL รูปภาพไปยัง Node JS Api ซึ่งใช้ Gemini Ai Api
Gemini-1.5-flash จะแปลงรูปภาพเป็นชื่อเรื่องราว จากนั้นฉันใช้ชื่อเพื่อสร้างเนื้อหาเรื่องราวโดยเรียกใช้โมเดลเดียวกัน
- เมื่อ Gemini สร้างเรื่องราวแล้ว ระบบจะบันทึกเรื่องราวนั้นลงใน Firestore
- เมื่อแอป Android ได้รับการตอบกลับสําเร็จ ฉันจะใช้รหัสเรื่องราวเพื่อดึงเรื่องราวจาก Firestore