Як пише The Verge, програми, які змінюють відео з’являються щодня. Це називають «глибинними фейками» (deepfakes). Нова програма використовує штучний інтелект, щоб копіювати рухи танцюристів на відео та застосовувати їх для заданого тіла.

Робота над роликом була проведена чотирма дослідниками з Каліфорнійського університету в Барклі. Спочатку відео танцюриста записується, а програма перетворює його рухи на фігуру з паличок. Потрібно дуже детальне відео (120 кадрів на секунду) довжиною з 20 хвилин. Потім нейронна мережа накладає на «фігуру з паличок» задане тіло.

Для цих маніпуляцій необхідно багато підпрограм. Приміром, є додаток, який згладжує рухи нового танцюриста, а також окрема нейронна мережа, яка змінює обличчя для більш реалістичного ефекту.

Скриншот

Крім того, програма не може імітувати легкі тканини, тому «фейковий танцюрист» одягнений в те, що прилягає до тіла. У наведеному відео також є багато візуальних аномалій, коли суглоби подібні до желе. Тобто штучний інтелект не може детально відтворити складні рухи, наприклад, коли рука проходить хвилею позаду тіла.

Раніше подібна технологія маніпуляцій з відео була використана, щоб змінити обличчя у роликах порнографічного характеру на зірок Голлівуду.

MediaSapiens також писав про те, як штучний інтелект створив трейлер до фільму «Морган», у якому йдеться про людиноподібного робота.