Дипфейк от Samsung может заставить темного монаха Распутина петь по-настоящему

Исследователи из исследовательского центра искусственного интеллекта Samsung в Кембридже, Великобритания, вместе с экспертами по компьютерным наукам из Имперского колледжа Лондона совместно работали над проектом по созданию состязательной сети генеративно-состязательной сети (GAN), которая может анимировать и идеально синхронизировать движения лица на 2D-изображениях. с аудиоклипами, содержащими человеческие голоса.

Помимо синхронизации движений губ и рта, эта модель искусственного интеллекта также может регулировать движения бровей и моргание, чтобы лица, которые она создает, выглядели более естественными. Однако самой важной задачей все равно будет синхронизация губ и рта с издаваемым звуком. Сегодня этот шаг часто выполняется во время постредактирования или с использованием компьютерной графики.

• Модель искусственного интеллекта использует данные с воздуха и наземные данные для навигации в труднодоступных для наблюдения районах.

Центр искусственного интеллекта Samsung

Исследователи полагают, что модель можно использовать для автоматического создания говорящих лиц героев мультфильмов самым естественным образом, улучшая видимость при видеозвонках с низкой пропускной способностью, обеспечивая лучшую синхронизацию рта или дубляж иностранных фильмов.

Среди примеров этого исследования, выложенных на YouTube, наиболее впечатляющим является видео, на котором знаменитый русский мистик Распутин (1869–1919) «исполняет» песню певицы Halo артистки Бейонсе. Некоторые другие видео также очень примечательны, например, покойные рэперы 2Pac и Biggie, поющие каверы на свои произведения, или великий ученый Альберт Эйнштейн, читающий цитату об общем языке науки.

• STEAL AI от Nvidia обеспечивает лучшую поддержку вывода для моделей компьютерного зрения

Темный монах Распутин исполняет песню Halo.

Кроме того, есть много других интересных видеопримеров, вы можете посмотреть их по адресу: https://sites.google.com/view/facial-animation/home .

Новость о вышеупомянутом исследовании появилась всего через месяц после того, как другой исследовательский центр искусственного интеллекта Samsung в Москве представил проект по созданию 2D-анимации с помощью искусственного интеллекта без использования моделей 3D. Известно, что эту технологию можно использовать для создания более убедительных цифровых аватаров или дипфейковых изображений.

Использование сетей GAN для подделки цифровых медиа, таких как изображения и видео, в последние годы стало заметной тенденцией в общей области искусственного интеллекта во всем мире. Многие сложные модели GAN были представлены в рамках конференций по искусственному интеллекту, таких как ICML, CVPR и многих других заметных мероприятий с начала года по настоящее время.

• Пять гениев в области искусственного интеллекта объединились, чтобы создать удивительных роботов

Распутин и певица Бейонсе

Среди них некоторые известные модели с чрезвычайно высоким прикладным потенциалом включают GauGAN от Nvidia, который может превращать каракули в стиле MS Paint в художественные «шедевры». Или CollaGEN — метод, созданный корейскими исследователями для замены количества недостающих данных в каждом изображении.

Хотя потенциал инструментов дипфейков во многих областях огромен, потенциальные риски, которые они несут, также являются головной болью для ученых.

Фактически, эта технология часто используется для того, чтобы выдавать себя за известных людей (актеров, певцов, моделей...) в фальшивых видеороликах или, что еще хуже, в порнофильмах. Видно, что эта технология вызвала сильный шок, поскольку многие люди поверили, что это правда. Это не только затрагивает честь и достоинство подделываемого человека, но и вызывает волнение общественного мнения и вызывает множество споров или еще хуже конфликтов.

• Японский искусственный интеллект создал суперреалистичные виртуальные манекенщицы

Deepfake содержит множество потенциальных рисков

Возможно, в будущем ученым, а также органам государственного управления придется объединиться, чтобы найти правила правильного и безопасного использования этой замечательной технологии для общества.