Клонирование голоса для видео:
ваш голос на 43 языках
Клонирование голоса для видео — это когда нейросеть копирует голос прямо из ролика (тембр, манеру, темп) и озвучивает им перевод. Отдельная запись не нужна: загрузили видео, выбрали язык — и человек говорит на нём своим голосом.
EnglishКлон собран из самой лекции, без отдельной записи. На всех пяти языках — тембр и темп лектора.
Оригинал: David Kryscynski, «Generic Strategies Mini-Lecture», CC BY. Перевод: Speeek.
РусскийРусский автор говорит по-английски своим голосом. Лёгкий акцент оригинала остаётся — так звучит клон из видео.
Оригинал: «Откровения Продюсера», «Как сделать, чтобы твои видео выглядели дорого…» (youtube.com/watch?v=twytRncMLsU), CC BY 3.0. Перевод: Speeek.
РусскийСнято в студии, речь чистая — клону есть из чего собраться. Английская версия ещё и с липсинком.
Оригинал: Теплица социальных технологий, «Как правильно снимать видео на телефон», CC BY. Перевод: Speeek.
Во всех трёх роликах клон собран автоматически из речи в самом видео. Ни одной отдельной записи голоса.
Как создаётся клон
Из речи в вашем ролике — автоматически. Или из записи, которую вы загрузите сами, если нужна максимальная похожесть.
Автоматически из ролика
Загружаете видео. Нейросеть находит в нём речь спикера, склеивает из неё образец до минуты и по нему создаёт голос.
Вместе с речью в образец попадает немного музыки и шума — поэтому клон бывает чуть «комнатным».
Из своей записи
Запишите минуту речи в тихой комнате и загрузите в раздел «Голоса». Голос сохранится и подставится в любой перевод.
Ни музыки, ни шума — клон ближе к оригиналу.
Одна фраза — три варианта на слух
Один человек, одна фраза. Обзор GrapheneOS с YouTube, CC BY.
Попробовать на своём ролике5 минут бесплатно, без карты
Что клон голоса сохраняет, а что нет
Чтобы не было сюрпризов после первого ролика.
Сохраняется
- Тембр. Высота и окраска голоса — то, по чему человека узнают.
- Манера и темп. Быстрая или размеренная речь, паузы, энергия подачи.
- Фон и музыка ролика. Оригинальная дорожка остаётся под новой речью, громкость перевода подгоняется под оригинал.
- Разные голоса у разных людей. До 5 спикеров, у каждого свой клон.
Сглаживается или меняется
- Пиковые эмоции. Крик, смех сквозь слова, дрожь в голосе клон выравнивает. Тембр ваш, накал ниже.
- Пение и шёпот. Клон говорит, а не поёт. Шёпот превращается в тихую обычную речь.
- Акцент. Клон из видео говорит без акцента; свой голос — как записан, с переключателем «Убрать акцент».
- Ударения и имена. Синтез иногда ставит ударение не туда. В редакторе оно задаётся знаком после гласной.
Когда клон из видео выходит хуже
Клон повторяет всё, что слышит в образце. Четыре вещи, которые чаще всего портят результат.
Музыка под голосом
Отделяем, но не идеально: громкая подложка оставляет след в тембре. Лечится своим голосом из записи.
Говорят одновременно
Перебивания в образец не берём. Укажете меньше спикеров, чем в ролике, — двое склеятся в один «средний» голос.
Мало речи
20 секунд хуже, чем 60. Меньше 10 — клон не соберётся, спикер получит голос из библиотеки.
Эхо и дальний микрофон
Телефон через комнату, гулкий зал, крик — клон выйдет «комнатным». Чем ближе микрофон, тем лучше.
Подробнее, почему голос бывает не похож и как это исправить — в справке.
Три места, где вы управляете голосом
Ничего настраивать не нужно: клон выбран по умолчанию. Но голос можно поменять до перевода, после него и завести свой.
При загрузке
Для каждого спикера — «Клон голоса оригинала», свой голос из «Мои голоса» или голос из библиотеки. Клон стоит по умолчанию.
После перевода
В редакторе на вкладке «Голоса спикеров» голос меняется у любого спикера. Фразы озвучатся заново — 1 минута за каждые 2 000 знаков.
Свой голос
«Голоса» → «Создать голос»: имя, язык записи, файл. Через пару минут голос активен и доступен во всех переводах. Как записать образец
Когда лучше взять голос из библиотеки
В библиотеке голоса носителей для каждого языка перевода, на Pro — ещё 17 премиум-голосов.
Нужен чистый язык без акцента
Реклама, карточки товаров, обучающие ролики для зарубежного рынка: зритель не знает автора, ему важна речь как у носителя.
Голос автора не узнаваем
Безликие каналы, закадровый текст, корпоративные инструкции. Клон здесь ничего не добавляет, а шум в ролике может испортить.
В ролике плохой звук
Запись с конференции, созвон, улица. Голос из библиотеки прозвучит лучше, чем клон, собранный из шума.
Клон голоса по тарифам
Отдельно за клон не платите: он входит в минуты перевода. Тарифы отличаются тем, чей голос и сколько своих голосов можно сохранить.
| Free5 минут один раз | Startот 500 ₽ / 5 мин | Proот 900 ₽ / 10 мин | Businessот 56 ₽ за минуту | |
|---|---|---|---|---|
| Клон голоса из видео | первая минута ролика, со знаком | один голос из библиотеки | ||
| Спикеров со своим голосом | до 5 | 1 | до 5 | до 5 |
| Свои голоса из записи | 5 | 10 | ||
| Премиум-голоса библиотеки | ||||
| Липсинк |
Все пакеты и цена минуты — на странице тарифов. Как подгоняются губы под новую речь — липсинк.
Про клонирование голоса спрашивают
Законно ли клонировать голос?
Свой голос — без ограничений. Чужой — только с согласия человека: лектора, клиента, партнёра; договорённости в переписке достаточно. Чужие ролики из интернета — смотрите лицензию: видео с YouTube со стандартной лицензией клонировать и публиковать нельзя, даже «для теста».
Сколько секунд речи нужно для клона?
Из видео — минимум 10 секунд чистой речи спикера, лучше около минуты: мы склеиваем самые длинные реплики в образец до 60 секунд. Меньше 10 секунд — клон не создаётся, спикер озвучивается голосом из библиотеки. Своя запись — от 30 секунд до 10 минут, в работу идут первые 60 секунд.
Будет ли у клона акцент?
Клон из видео всегда говорит без акцента на языке перевода — речь чище, похожесть чуть ниже. Свой голос из записи по умолчанию переносит произношение оригинала: русский спикер по-английски звучит с русским акцентом. Галочка «Убрать акцент» переводит его на произношение носителя, но похожесть падает. Выбирайте, что важнее.
Можно озвучить своим голосом просто текст, без видео?
Нет. Speeek работает с роликами и аудиозаписями: распознаёт речь, переводит и озвучивает клоном; готовый текст с нуля озвучить нельзя. Зато можно переозвучить ролик на том же языке: язык перевода тот же, что у оригинала, правите текст в редакторе — и видео заговорит вашим голосом с новыми словами.
В ролике несколько человек — у каждого будет свой голос?
Да, до 5 спикеров, у каждого свой клон, собранный из его реплик. Куски, где говорят одновременно, в образец не попадают. Укажите число спикеров при загрузке: если указать меньше, два человека склеятся в одного «среднего» спикера.
Голос получился не похож. Что делать?
Чаще всего мешает звук в ролике: музыка под голосом, эхо, запись издалека, мало речи. Надёжнее всего — свой голос из чистой записи в разделе «Голоса» без «Убрать акцент». Если и так не похож — напишите в поддержку со ссылкой на перевод, послушаем образец и скажем, что мешает.
Что происходит с образцом моего голоса?
Образец хранится у нас, пока существует голос, и используется только в ваших переводах. Удалить голос можно в любой момент через меню на его карточке — в старых переводах он заменится стандартным. Клоны из видео живут вместе с задачей и удаляются вместе с ней.
Как устроено клонирование и чем отличаются сервисы — в статье «Перевод видео с сохранением голоса: как работает клонирование». Про акцент — в справке.
Услышьте свой голос на другом языке
5 минут бесплатно, карта не нужна. Клон собирается из вашего ролика сам.
Попробовать бесплатно