Дослідники з Університету Вашингтона недавно продемонстрували, як можуть бути створені 3D анімації Тома Хенкса, Деніела Крейга та кількох інших знаменитостей з склеювання нерухомих зображень і звукових фрагментів, взятих з Інтернету. Вони також показали, як їх алгоритми можуть оживити ці цифрові моделі, змушуючи їх говорити слова, які насправді сказав хтось інший.
Як повідомляє mykickup.ru, технологія грунтується на досягненнях тривимірної реконструкції особи, відстеження, вирівнювання і мульти-текстурного моделювання, які були розроблені дослідницькою групою на чолі з доцентом інформатики та інженерії Ірою Кемельмахер-Шліцерман.
Останні досягнення науково-дослідницької команди включають в себе можливість передачі виразів і способів, за якими конкретна людина говорить від імені когось ще – наприклад, відображення манери колишнього президента Джорджа Буша на обличчях інших політиків і знаменитостей. Алгоритми, розроблені дослідниками, «добувають» мінімум 200 знімків з Інтернету і займаються процесом, відомим як навчання «в дикій природі».
На перший погляд, може здатися,
що в чужих руках технологія в кінцевому рахунку може показати, як Дональд Трамп говорив слова, які були фактично сказані Бараком Обамою або навпаки, наприклад. Мета вашингтонських дослідників, набагато менш неприємна. Вони сподіваються, що це в кінцевому підсумку дозволить членам сім'ї взаємодіяти з інтерактивною моделлю далекого родича, створивши повністю інтерактивну тривимірну цифрову особистість із сімейних фотоальбомів і відео, історичних колекцій або іншого контенту.
Як розвиток технології віртуальної і доповненої реальності, вони бачать, що їх 3D підхід замінить поточний 2D підхід в Skype або FaceTime.
«Ви могли б в один прекрасний день надіти пару окулярів доповненої реальності і побачити 3D-модель вашої матері на дивані, - говорить Кемельмахер-Шліцерман. Така технологія ще не існує – технологія відображення рухається вперед дуже швидко, але як ви відтворите свою матір у трьох вимірах?».
Проектування дивиться в майбутнє розваг, дослідники відзначають, що це може в кінцевому підсумку також замінити нинішній процес створення цифрових героїв фільму. Щоб створити вигаданого персонажа, як Бенджамін Баттон, кожен кут і рух Бреда Пітта, який виконує цю роль, повинен був записуватися в контрольованих умовах.
Ці зображення були відредаговані разом, щоб створити завершеного персонажа, який рухався і говорив плавно, як старий.