Новый Deepfake-алгоритм позволяет редактировать речь человека на видео

Если ранее были выпущены программные комплексы, которые могут по фото и написанному тексту создавать видео с говорящей головой, то новый алгоритм позволяет вносить правки в уже снятое видео путем простой замены слов говорящего.

Учеными из США создан новый инструмент из разряда deepfake-алгоритмов, который умеет редактировать, к примеру, говорящие головы, внося сделанные правки в произнесенный текст и заменяя мимику на видео. Авторы разработки уделили особое внимание простоте внесения правок в видеоматериал – данный процесс является немногим сложнее исправления текста в обычном редакторе.

Для использования алгоритма его сначала нужно обучить мимике конкретного человека, предоставив программе 40 минут видео и весь произносимый текст в отдельном файле. Затем нужно указать алгоритму видеоролик-мишень, произнесенный там текст, а также исправленный текст, после чего программа самостоятельно создаст 3D-модель мимики говорящего с произношением нового текста и наложит ее на имеющееся видео.

Конечно же, создатели этого deepfake-монстра преследовали сугубо «мирные» цели, такие как снятие видеороликов и даже фильмов за один дубль, и внесение правок в отснятые кадры по мере необходимости, к примеру, при изменении сценария. Однако реальное использование новой технологии, как опасаются ее создатели, будет, вероятнее всего, продемонстрировано «во всей красе» в 2020 году, когда в США начнутся президентские выборы.

загрузка...

Коротко

Показать все новости