Google розробила AI, який перетворює фото на анімований аватар

Мета алгоритму — створити реалістичне відео змінної довжини із зображенням людини, що розмовляє. Технологія здатна синхронізувати рух губ, додати моргання очей та жестикуляцію. Ще VLOGGER здатний відредагувати вираз обличчя на готовому відео: наприклад, закрити очі або рот.

Нарешті, технологію можна використовувати для перекладу промови з синхронізацією руху губ з вимовою на іншій мові. Схожу функцію пропонує, наприклад, сервіс HeyGen.

Більше прикладів роботи на сайті проєкту.

«Технологію можна використовувати не тільки для спрощення творчих процесів, але і для нових можливостей, таких як онлайн-комунікації, освіта або персоналізовані віртуальні помічники», — дослідники Google.

VLOGGER не вимагає навчання для конкретної персони: на вхід подається лише одна фотографія та аудіодоріжка з промовою, яку має «вимовити» анімований аватар. Автори розробки стверджують, що VLOGGER перевершує інші подібні нейромережі за якістю роботи.