Британська компанія Flawless випустила програмний пакет TrueSync, який за допомогою нейромережі синтезує рухи губ і лицьових м'язів акторів так, ніби вони говорять іншою мовою. Це дозволяє домогтися ілюзії того, що актори у фільмі вимовляють репліки з дубляжу, а не з оригінальної звукової доріжки.
Для цього застосовується метод, відомий як deepfake. Тобто TrueSync замінює обличчя актора глибинним фейком з урахуванням оригінальної міміки. Творці технології стверджують, що при такому підході зберігаються оригінальні емоції акторів.
У представлених відео можна побачити, як Том Хенкс та Роберт де Ніро "говорять" іншими мовами, окрім англійської.
Зараз актори дубляжу змушені підлаштовувати перекладені репліки під довжину оригіналу. При цьому навіть в такому випадку уважний глядач може помітити, що почуті слова не збігаються з тим, що сказав сам актор.
Представники Flawless поки що не розкривають ціну використання її розробки.
Читайте також
Як Deep Nostalgia оживляє фото, а технологія Deep Fake впливає на мистецтво
Глибинні фейки. Як розпізнати та боротися із новою інформаційною загрозою
