Генератор аудиоописания

Что он делает

Приложение Audio Description Generator — это инструмент для создания описательных аудиодорожек для коротких видеороликов YouTube за считанные минуты. Получив ссылку на YouTube, приложение извлекает видео, название и описание. Затем оно начинает с разбиения видео на более мелкие фрагменты. Эти фрагменты вместе с данными YouTube сначала используются для создания «контекстного файла» с помощью Gemini, который выступает в качестве первого прохода для обнаружения общих деталей и идентификации любых символов. Затем каждый фрагмент используется для создания «файла громкости», который измеряет громкость на каждом интервале, и «стенограммы» (с помощью Gemini), которая перечисляет диалоги из видео с временными метками. Затем вся эта информация снова передается в Gemini для создания «сценария» наблюдений с временными метками. Затем эти скрипты пропускаются через функцию преобразования текста в речь Google Cloud, полученный звук сшивается вместе, и окончательный результат представляется пользователю.