LingoBell

Что он делает

LingoBell — это веб-платформа, разработанная для глобального языкового обмена посредством видеозвонков 1:1 в режиме реального времени. Мы используем API Gemini 1.5 Pro для улучшения взаимодействия с пользователями, рекомендуя темы для разговоров на основе языковых предпочтений, целей обучения и интересов. Это помогает пользователям преодолеть первоначальную неловкость и участвовать в содержательных беседах. API также поддерживает нашу динамическую генерацию тестов, создавая персонализированные тесты, которые позволяют пользователям оценивать свои языковые навыки в увлекательной интерактивной форме.

Наша платформа включает в себя функцию преобразования речи в текст в реальном времени (STT) с переводом, преобразование устной речи в текст и перевод его на предпочитаемый пользователем язык, реализованную через WebSockets и WebRTC для бесперебойной коммуникации. Мы также предлагаем функцию Face Swap, чтобы сделать общение более интересным и развлекательным.

Мы используем Firebase Cloud Messaging для уведомлений в чате и Firebase Realtime Database для отслеживания активности пользователей, улучшая подбор игроков, показывая, кто находится в сети. Изображения профилей хранятся в Google Cloud Storage. Изначально мы использовали сервер GPU для нашей модели STT, но мы изучаем более экономичные решения. Аутентификация безопасно обрабатывается с помощью Firebase Authentication с логином Google.

Фронтенд LingoBell создан на React, а бэкенд использует FastAPI Python. Мы стремимся постоянно улучшать нашу платформу, делая изучение языка доступным, интересным и эффективным. Наша цель — создать наилучший возможный опыт языкового обмена.