Нейромережа навчилася підлаштовувати міміку актора під дубляж

Нейромережа навчилася підлаштовувати міміку актора під дубляж

Нейромережа навчилася підлаштовувати міміку актора під дубляж

Британська компанія Flawless випустила програмний пакет TrueSync, який за допомогою нейромережі синтезує рухи губ і лицьових м'язів акторів так, ніби вони говорять іншою мовою. Це дозволяє домогтися ілюзії того, що актори у фільмі вимовляють репліки з дубляжу, а не з оригінальної звукової доріжки.

Для цього застосовується метод, відомий як deepfake. Тобто TrueSync замінює обличчя актора глибинним фейком з урахуванням оригінальної міміки. Творці технології стверджують, що при такому підході зберігаються оригінальні емоції акторів.

У представлених відео можна побачити, як Том Хенкс та Роберт де Ніро "говорять" іншими мовами, окрім англійської.

Зараз актори дубляжу змушені підлаштовувати перекладені репліки під довжину оригіналу. При цьому навіть в такому випадку уважний глядач може помітити, що почуті слова не збігаються з тим, що сказав сам актор.

Представники Flawless поки що не розкривають ціну використання її розробки.

Читайте також

Як Deep Nostalgia оживляє фото, а технологія Deep Fake впливає на мистецтво

Глибинні фейки. Як розпізнати та боротися із новою інформаційною загрозою

Категорії
КонцертиТеатрАрхітектураДизайнІнше