То, о чём мечтали блогеры/монтажеры - свершилось.))
Whisper Timestamped
Из описания:
" Нейронка переводит речь в текст прямо в браузере. Загружаете любое видео — получаете транскрипцию с временными метками.
Есть много языков, в том числе русский. Работает на лету, без ошибок и позволяет скачать полученный текст. Главное — всё бесплатно.
https://huggingface.co/spaces/Xenova/wh … timestamps
Записал экранку, чтобы было понятнее, о чём речь.
Плюшки:
1.) 100 языков и направлений перевода.
2.) Скачанный текстовый файл имеет разрешение .json , т.е его понимает любая программа для видеомонтажа и он легко поддается в обычном блокноте редактированию (подтянуть качество перевода).
3.) Временные метки, привязанные к видео - устраняет рассинхрон субтитров и видео. Монтаж субтитров к видео не займёт больше минуты и будет идеальным (почти).))
4.) Перевод можно скачать, закинуть в любую программу озвучки текста и по-красоте озвучить видео профессиональными голосами, устранив такой уже приевшийся переводчик яндекса.
Минус он же плюс: Модель скачивается на ваш комп и работает локально, даже без подключения к инету - это плюс. Скорость работы зависит от мощности железа - это минус. Но у меня обычная четырёхядерная балалайка для инета - двухминутное видео обрабатывалось примерно минуту. Переводил с русского на литовский.
И да, важно заранее выбрать язык, на который будем переводить или транскрибировать, чтобы эта модель скачалась. Новый проект или изменения - обновить страницу. Вроде всё.
Отредактировано Поумневший (21.07.2024 10:24:19)
