Ứng dụng nghiên cứu về AI của YouTube

Ý nghĩa

Ứng dụng của tôi được phát triển trong react native cho phép bạn tự kiểm tra kiến thức về các video trên YouTube, trò chuyện với nội dung bản chép lời của video và cung cấp cho bạn một bản tóm tắt thông minh mà bạn có thể nhấp và phát tại nhiều điểm.

Gemini được dùng để tóm tắt thông minh bằng cách tạo một câu lệnh chấp nhận bản chép lời có dấu thời gian MM:SS. Từ đây, tôi đã xác định một giản đồ json mà tôi muốn nhận lại từ gemini. Kết quả là rất đáng tin cậy và có thể phân tích cú pháp kết quả dự kiến này trong ứng dụng gốc phản ứng mà tôi đã phát triển, sử dụng các dấu thời gian MM:SS này tại các điểm để tìm đến thời gian chính xác trong trình phát YouTube trên ứng dụng. Cửa sổ ngữ cảnh dài của Gemini rất quan trọng. Nó có thể xử lý 5 giờ bản chép lời video mà không gặp vấn đề gì

Tương tự như vậy, đối với màn hình Hỏi đáp, sau khi thử nghiệm với nhiều câu lệnh và giản đồ json, tôi đã chọn một câu hỏi trắc nghiệm và câu trả lời mà Gemini cũng trả về câu trả lời chính xác. Từ đây, tôi có thể sử dụng phản hồi json này để tạo một câu hỏi trắc nghiệm tương tác dựa hoàn toàn trên bản chép lời của video. Điều này sẽ không dễ dàng với Gemini. Ngoài ra, chúng tôi cũng triển khai tính năng làm mới cho nhiều số lượng câu hỏi và câu trả lời.

Cuối cùng, chúng tôi đã triển khai thẻ màn hình trò chuyện để có thể trò chuyện với bản chép lời video và đặt bất kỳ câu hỏi nào có thể nảy sinh trong khi nghiên cứu video và tìm hiểu thêm. Điều này đã tận dụng kiến thức mạnh mẽ hiện có với gemini cùng với ngữ cảnh của bản chép lời video.

Chúng tôi cũng sử dụng tính năng lưu trữ, hàm và cơ sở dữ liệu của Firebase.