Топ-15 лучших приложений для дипфейков в 2023 году

Как анимировать фотографии с собственным лицом на Reface

Технология смены лица Reface называется Swap Animation, и в приложении есть два типа функций смены лица, которые ее используют.

Animate Image применяет анимированное изображение к загружаемой фотографии, в результате чего на вашем изображении появляются выражения и движения из анимации. Swap & Animate вставляет ваше лицо в анимированное изображение знаменитости, известного портрета или рисунка разных художников.

Ниже мы покажем вам, как использовать обе эти функции.

Скачать: Reface для iOS | Android (бесплатно, предлагает покупки в приложении)

Как использовать функцию анимации изображения

Вот как оживить вашу фотографию с помощью анимации:

1. Откройте приложение Reface , нажмите значок плюса ( + ) внизу и выберите « Анимировать изображение» .
2. Вы будете перенаправлены в свою фото-библиотеку, где сможете выбрать свое изображение. Вы также можете сделать селфи, коснувшись значка камеры в правом верхнем углу.

3. Теперь, когда приложение проанализирует вашу фотографию, выберите анимацию во всплывающем окне (нажмите « Просмотреть все», чтобы просмотреть их все). Каждая анимация поставляется с музыкальным клипом или аудио. Коснитесь « Выбрать» , затем нажмите « Повтор» .
   Галерея изображений (3 изображения)

   Расширять

   Расширять

   Расширять

   Закрывать

   Изображение 1 из 3

   Изображение 2 из 3

   Изображение 3 из 3

   var images = document.getElementsByClassName(«gallery-0-images»);

   for (var i = 0; i

4. Он направит вас в окно воспроизведения, из которого вы можете сохранить или поделиться результатами. Вам нужно будет приобрести версию Pro, чтобы удалить водяной знак. Нажмите « Готово» в правом верхнем углу, чтобы вернуться на главный экран.
   Галерея изображений (2 изображения)

   Расширять

   Расширять

   Закрывать

   Изображение 1 из 2

   Изображение 2 из 2

   var images = document.getElementsByClassName(«gallery-0-images»);

   for (var i = 0; i

Как использовать функцию обмена и анимации

Чтобы оживить фотографию со своим лицом:

1. Откройте перетачивать приложение и найти своп & Animate в меню в верхней части. Выберите изображение, на которое вы хотите встроить свое лицо.
2. Вы будете перенаправлены на вкладку с загруженными вами изображениями. Нажмите + Создать, чтобы сделать селфи с помощью камеры или выбрать изображение из библиотеки фотографий.

3. После того, как вы загрузили свое изображение, нажмите Reface, чтобы приложение обнаружило ваше лицо и встроило его в первое выбранное изображение. Возможно, вам придется посмотреть рекламу, если вы не приобрели версию Pro.
   Галерея изображений (3 изображения)

   Расширять

   Расширять

   Расширять

   Закрывать

   Изображение 1 из 3

   Изображение 2 из 3

   Изображение 3 из 3

   var images = document.getElementsByClassName(«gallery-0-images»);

   for (var i = 0; i

4. Теперь вы будете перенаправлены к окну неподвижного изображения с вашим лицом. Вы увидите несколько действий, которые вы можете выполнить, например добавление текста, совместное использование и сохранение. Чтобы оживить изображение, нажмите « Анимация» .
5. Выберите тип анимации во всплывающем окне (нажмите « Просмотреть все», чтобы просмотреть все) — каждая из них содержит музыкальный клип или звук. Нажмите « Выбрать» , а затем нажмите « Перефразировать» .

6. Он направит вас в окно воспроизведения, из которого вы можете сохранить или поделиться результатами. Вам нужно будет приобрести версию Pro, чтобы удалить водяной знак. Нажмите « Готово» в правом верхнем углу, чтобы вернуться на главный экран.
   Галерея изображений (4 изображения)

   Расширять

   Расширять

   Расширять

   Расширять

   Закрывать

   Изображение 1 из 4

   Изображение 2 из 4

   Изображение 3 из 4

   Изображение 4 из 4

   var images = document.getElementsByClassName(«gallery-0-images»);

   for (var i = 0; i

Самые популярные CGI и Deekfake

Теперь, когда вы знаете немного больше об этих популярных техниках, используемых в кино, на телевидении и во многих других средствах массовой информации, мы хотим показать вам некоторые из самые популярные CGI и дипфейки момента. Некоторые были подвергнуты резкой критике, и теперь мы объясним, почему.

Раскритикованная компьютерная игра The Mandalorian

Как мы уже упоминали несколько строк назад, использование техники компьютерной графики в кино для воплощения персонажей является нормой дня. И они сделали это в последней серии Мандалорианец 2 с новым появлением очень молодой Люк Скайуокер .

От Disney нет официального заявления, объясняющего процедуры, которые использовались для этих сцен, но очевидно, что они не были так отполированы, как должны быть (и, тем более, зная, какие бюджеты обрабатываются).

После эйфории фанатов после того, как один из их любимых персонажей «вернулся к жизни» в том виде, в котором он был в 70-х, критика нереалистичности этих сцен не заставила себя долго ждать.

Воспользовавшись моментом, создатели Сэм и Нико , чтобы YouTube канал, специализирующийся на редактировании видео и спецэффектах, решил попробовать улучшить эти сцены, и они это сделали.

Как они объясняют в одном из своих видео, они тщательно проанализированы движения и черты лица (вместе с ошибки освещения и текстуры что они комментируют клипы, в которых появляется Люк). Затем, вытащив архив, проанализировали большое количество видео и фотографий персонажа, когда он имел желаемую внешность. После всего этого анализа и с помощью сверхмощной команды, которая все обработала, они использовали Техника дипфейка разместить маску Люка Скайуокера на сцене, созданной Диснеем в «Мандалорце».

Ваш результат был лучше? Вы можете судить сами, посмотрев его видео, но, на наш взгляд, улучшение заметное.

CGI Уилла Смита в Близнецах

Еще один из самых популярных случаев применения этих техник за последние годы был в кино. Gemini . В нем мы видим, как 51-летний Уилл Смит сражается против другого 23-летнего «Уилла».

Еще раз, генерация графики через компьютер вместе с распознавание лиц и методы искусственного интеллекта позволили нам проанализировать каждую черту лица актера в 2019 году, а затем объединить их с изображениями его внешности, когда ему было всего 20 лет. К счастью, у Уилла Смита есть большой архив сцен за это время, как в фильме. Два мятежных полицейских или Люди в черном .

Сам Уилл объясняет часть процесса (показывая множество закулисных изображений) в видео на своем канале YouTube.

Deepfake Лоле Флорес

Последняя реклама пивоваренной компании Cruzcampo не могла отсутствовать как наглядный пример, в котором, используя технику Deepfake, возродилась популярная певица Лола Флорес .

Если вы хотите подробно узнать, как этот метод был применен для создания рекламы рекламные ролики, На самом канале YouTube компания рассказала о процессе в видео.

Что такое Reface

Сегодня – речь о программе Reface, которая на лету способна заменить одно лицо на другое в любом видео или гифке, и, что самое главное, сделать это с очень реалистичным результатом. В итоге свое лицо вы сможете спустя несколько секунд увидеть в популярных гифках, отрывках фильмов, рекламе или игр. При этом, в отличие от громоздких нейросетей, вам не придется делать множество фотографий с разных ракурсов, достаточно одного фото анфас.

Сейчас приложение Reface вышло на первое место в американском AppStore в категории «Развлечения», опередив такие топовые сервисы, как TikTok, Netflix, HBO и другие. Более того, в общем рейтинге Рефейс занял второе место, обогнав YouTube, Gmail, Instagram и Facebook Messenger. При этом за проект, основанный в 2011 году, отвечает украинская команда Neocortext, состоящая из трех киевлян — Романа Могильного, Олеся Петрива и Ярослава Бойко.

Первоначально приложение называлось Doublicat, и в нём можно было создавать только дипфейк-гифки, и приложение не снискало популярности. Однако украинские разработчики не отчаивались и после ребрендинга завоевали заслуженную известность. Сейчас Reface на Android и iOS входит в десятку самых популярных приложений более чем в 40 странах, а им пользуются даже звезды вроде Бритни Спирс, Снуп Догга, Гарика Харламова, Павла Воли и множество других знаменитостей.

Сейчас украинская команда разрослась до 40 человек и готовит к выпуску веб-платформу Reface Studio, с помощью которой создатели смогут вставлять любые лица в любые видео.

Вы наконец скачиваете приложение Reface, но не можете разобраться в том, как им правильно пользоваться? Предлагаем воспользоваться специальной инструкцией, которая поможет использовать данное приложение по назначению и не даст Вам запутаться.

Что такое дипфейки?

Прежде чем перейти к дальнейшему обсуждению дипфейков, было бы полезно уделить немного времени и уточнить что такое «дипфейки» на самом деле. Существует значительная путаница в отношении термина «дипфейк», и часто этот термин неправильно применяется к любому фальсифицированному медиа, независимо от того, является ли он подлинным дипфейком. Чтобы квалифицироваться как дипфейк, рассматриваемые поддельные медиа должны быть созданы с помощью системы машинного обучения, в частности, глубокой нейронной сети.

Ключевым компонентом дипфейков является обучение с помощью машины. Машинное обучение позволило компьютерам относительно быстро и легко автоматически генерировать видео и аудио. Глубокие нейронные сети обучаются на кадрах с реальным человеком, чтобы сеть могла узнать, как люди выглядят и двигаются в целевых условиях окружающей среды. Затем обученная сеть используется для изображений другого человека и дополняется дополнительными методами компьютерной графики, чтобы объединить нового человека с исходным материалом. Алгоритм кодировщика используется для определения сходства между исходным лицом и целевым лицом. После выделения общих черт лиц используется второй алгоритм ИИ, называемый декодером. Декодер проверяет закодированные (сжатые) изображения и восстанавливает их на основе особенностей исходных изображений. Используются два декодера: один на лице исходного субъекта, а второй на лице целевого человека. Чтобы произвести обмен, декодер, обученный на изображениях человека X, получает изображения человека Y. В результате лицо человека Y является реконструкцией по выражению лица и ориентации человека X.

В настоящее время для создания дипфейка по-прежнему требуется довольно много времени. Создателю подделки приходится долго вручную корректировать параметры модели, так как неоптимальные параметры приведут к заметным несовершенствам и сбоям изображения, выдающим истинную природу подделки.

Хотя часто предполагается, что большинство дипфейков создаются с помощью нейронной сети, называемой генеративно-состязательная сеть (GAN), многие (возможно, большинство) дипфейков, созданных в наши дни, не полагаются на GAN. По словам Сивей Лю из SUNY Buffalo, хотя GAN действительно играли заметную роль в создании ранних дипфейков, большинство видео дипфейков создаются с помощью альтернативных методов.

Для обучения GAN требуется непропорционально большой объем обучающих данных, а для GAN часто требуется гораздо больше времени для рендеринга изображения по сравнению с другими методами генерации изображений. GAN также лучше подходят для создания статических изображений, чем видео, поскольку GAN трудно поддерживать согласованность от кадра к кадру. Гораздо чаще для создания дипфейков используется кодировщик и несколько декодеров.

Плюсы и минусы приложения

Рассмотрим, какие положительные и отрицательные моменты можно отметить в приложении.

Преимущества программы:

• Занимает мало места в памяти телефона.
• Это безопасность данных, так как программа «считывает» только основные черты внешнего вида. Фотографии, сделанные пользователем, удаляются из Google Cloud через 24 часа.
• Вы не можете использовать приложение анонимно.
• Видео/изображения, созданные с помощью редактора, имеют водяной знак, указывающий, что материал был создан с помощью Reface Studio.
• Предлагается широкий выбор тем, которые регулярно обновляются/изменяются.
• Вы можете сохранить готовую работу в своем гаджете.

Из минусов:

• Есть опасность, что при включении возможности удаления водяного знака, специальной надписи на изображении, защищающей авторские права, появляется возможность использовать полученный продукт для создания фейковых новостей.
• Иногда качество финальных видео недостаточно высокое из-за размытости деталей.
• Бесплатный период довольно короткий, после чего вы должны приобрести платную версию.

Этот забавный редактор идеально подходит для тех, кто ищет развлечений. Вы можете скачать Reface на ПК.

Краткая история дипфейка

Одна из самых известных фотографий бывшего президента США А. Линкольна, опубликованная уже после его смерти в 1865 г., — далекий предок современного дипфейка. На снимке голова американского президента наложена на фотореалистичную гравюру 1852 г. с изображением вице-президента США Дж. Кэлхуна, которая была изготовлена на основе ранее написанного портрета маслом . Имя создателя подделки история не сохранила, однако известно, что художник был не только талантливым, но и тонко чувствовавшим актуальный политический момент. Он не просто «приклеил» голову А. Линкольна c работы известного фотографа М. Брэди (кстати, именно это изображение впоследствии появится на пятидолларовой купюре), но и отредактировал документы в кадре, на которые опирается рука Дж. Кэлхуна. В оригинальной гравюре с вице-президентом они были о свободной торговле и суверенитете штатов, а в новой версии, уже с учетом итогов гражданской войны в США, — о Конституции, союзе штатов и отмене рабства. Причина появления этого, пожалуй, первого задокументированного дипфейка с известной личностью весьма прозаична: А. Линкольн на момент смерти воспринимался значительной частью американцев как национальный герой, однако не любивший фотографироваться президент оставил после себя очень мало изображений и ни одного «героического» фото. Дипфейк неизвестного автора успешно восполнил этот «культурологический пробел».

История актуальной итерации дипфейка началась в 2014 г., когда студент Стэнфордского университета Й. Гудфеллоу разработал программный метод получения новых материалов (текстовых или звуковых) с помощью уже собранной базы данных. Однако потребовалось еще три года, чтобы этот метод получил свое теперь уже известное во всем мире название — «дипфейк». В 2017 г. анонимный пользователь под одноименным псевдонимом «deepfakes» (дипфейки) загрузил на популярный форум с элементами соцсети «Reddit» видеоролик порнографического содержания, в котором «снялись» голливудские звезды

Видео вскоре было удалено, однако, поскольку «Интернет помнит все», то представленная широкой аудитории «во всей красе» технология замены лица, основанная на инструментах машинного обучения и глубокого обучения , мгновенно привлекла внимание СМИ, «завирусилась», разойдясь по различным форумам и соцсетям. Уместно подчеркнуть, что по некоторым оценкам, 95–96 % всех создаваемых дипфейк-видео — это порнография в том числе с целью мести и/или дискредитации как известных личностей, так и рядовых граждан

С течением времени ее удельный вес в общем объеме синтетического видео остается достаточно стабильным. Вероятно, каков спрос, такое и предложение…

Выпустив джина из бутылки, то есть позволив новой «забаве» вызвать нешуточный интерес людей по всему миру, многие транснациональные цифровые платформы, в том числе , в итоге осознали возникшие риски. В 2018 г. ими была предпринята попытка очистить виртуальные информпотоки от каких-либо ссылок и упоминаний дипфейк-технологий, естественно, безуспешно . Введенные ограничения и запреты лишь усиливали интерес интернет-пользователей. Одновременно с этим совершенствовался и облегчался инструментарий создания синтетического контента. За несколько лет порог «входа» в технологический процесс производства дипфейков радикально снизился. Сегодня уже не нужно быть программистом высокой категории или специалистом в сфере Data Science. Достаточно обладать навыками компьютерной грамотности чуть выше среднего и уметь оперировать соответствующим типовым набором программного обеспечения с открытым исходным кодом от компаний-поставщиков типа «» и «NVidia». Это под силу уже многим старшеклассникам.

Ghost

Ghost is the short form for Generative High-fidelity One Shot Transfer. This tool uses single-shot, which means it uses a single source image to swap the target face in a video or image without an additional training stage. Ghost is designed to maintain target face liveness once a swap is done. 

Key features 

• Swap faces on videos and images
• Uses single-shot approach
• Open source 

Ghost uses the eye loss function that preserves eye direction as in the target face. This tool also uses adaptive blending that allows users to transfer the shape of the source face effectively. The tool has image-to-image and single-shot image-to-video pipelines for high-quality swaps. 

Генеративно состязательная нейросеть (GAN).

Которую применяют для создания Deepfake, также изображений животных, людей, или написании картин изобразительного искусства, они продаются за немалые деньги.

GAN отличается по логике алгоритма от метода обратного распространения ошибки, имея в своей структуре три нейросетевых компонента, два из которых это генерация изображений и сравнительная — сравнивает изображения с реальными. А третий компонент создаёт состязательную часть между двумя компонентами, пока второй компонент не перестанет отличать сгенерированное изображение от реального, отсюда и название генеративное состязательная нейросеть.

Также GAN способен воспроизводить сгенерированный голос по сохраненным голосовым данным.

Мошенническая опасность Deepfake технологии

Распространена мошенническая Deepfake модель по подмене голоса, где руководитель даёт задание перевести некую сумму на определенный счет, которая стоила крупным компаниям многие миллионы долларов.

Для законодательных структур, пока видео Deepfake не составляет такой проблемы, как аудио подмены, где технология достигла высокого уровня, разницу возможно определить только при глубоком анализе голоса.

Как распознать поддельные Deepfake видео.

В отличие от аудио технологий, Deepfake видео пока еще не такие совершенные и распознать их можно не вооруженным глазом.

Прерывистое движение;

разное освещение участков фрагментов видео;

различия в оттенках кожи;

Человек моргает неестественно;

синхронизация губ с речью не соответствует;

цифровые артефакты в изображении.

Microsoft 

Video Authenticator может анализировать неподвижную фотографию или видео, чтобы обеспечить процентную вероятность подлинности, подтверждая, что контент искусственно манипулируется. В случае видео он может предоставлять этот процент в режиме реального времени на каждом кадре во время воспроизведения видео. Он работает, обнаруживая границу смешивания deepfake и тонкие элементы выцветания или оттенков серого, которые не могут быть обнаружены человеческим глазом.

DARPA 

Группа медиа-криминалистики DARPA, также известная как MediFor, работает в группе вместе с другими исследователями, настроенными на разработку инструментов AI для deepfakes. В настоящее время они фокусируются на четырех методах распознавания deepfakes, чтобы найти аудиовизуальные несоответствия, присутствующие в поддельном видео. Это включает в себя анализ синхронизации губ, обнаружение несогласованности динамиков, несогласованности сцен и вставок контента.

Недавно в США в бюро по авторскому праву была попытка регистрации авторского права искусственным интеллектом, но решение отклонили, так как ИИ не может иметь таких прав.

Опасность технологии deepfakes

По данным Symantec, миллионы долларов были украдены у трех компаний, которые стали жертвами аудио-атаки deepfake. При каждой атаке синтетический голос, сгенерированный ИИ, звонил финансовому сотруднику, чтобы запросить срочный денежный перевод. Модели deepfakes были обучены по публичным выступлениям генерального директора.

Технологии deepfakes, может оказать огромное влияние на экономику и национальную безопасность, оно может нанести вред отдельным людям и государству. Deepfakes еще больше подорвет, уже снижающееся доверие к средствам массовой информации.

Этика и последствия deepfake голоса

Deepfake голос, несмотря на свои потенциальные преимущества и инновационный потенциал, также вызывает серьезные этические и правовые вопросы, а также может иметь неблагоприятные последствия:

1. Манипуляция информацией: Deepfake голос может быть использован для создания фальшивых аудиозаписей, которые могут быть легко распространены и использованы для манипуляции общественным мнением. Наследственность, подделка звонков в бизнесе или политические манипуляции — это лишь некоторые из примеров сомнительного использования deepfake голоса.

2. Вымогательство и мошенничество: Deepfake голос может быть использован для мошенничества и вымогательства. Киберпреступники могут создать фальшивые голосовые сообщения от имени человека, который могут быть использованы для получения финансовой выгоды или шантажа.

3. Нарушение приватности: Deepfake голос имеет потенциал нарушать приватность людей. Фальшивые голоса могут быть созданы из доступных записей для звонков, аудиофайлов или даже социальных медиа, что угрожает конфиденциальности и безопасности личных данных.

4. Ущемление доверия: Deepfake голоса могут создавать ситуации, в которых становится сложно различить правдивую информацию от фальшивой. Это может привести к ущемлению доверия и неправильным решениям на индивидуальном, организационном или политическом уровне.

В целом, использование deepfake голоса требует особой осторожности и ответственности, чтобы минимизировать отрицательные последствия и соблюдать этические стандарты

Что такое дипфейк простыми словами

Многие люди не знают, что такое дипфейк. Это слово было сформировано из двух выражений: deep learning («глубокое обучение» — термин, использующийся в сфере обучения искусственного интеллекта) и fake («подделка, фальшивка»). Таким образом, deepfake — это поддельные видео и фотографии, которые сделаны с использованием искусственного интеллекта. Проще говоря, лицо одного человека заменяется лицом другого.

Данная технология начала активно разрабатываться ещё в конце девяностых. В 1997 году компания Video Rewrite выпустила программу, с помощью которой пользователь мог создать видео, где движения лица синхронизировались с заранее сформированной аудиодорожкой. Таким образом, моделировались артикуляционная мимика говорящего человека.

Что такое дипфейк

Технология совершенствовалась долгие годы. На сегодняшний день человек может обрабатывать голос, объединять компьютерную графику с реальным видео и т.д. В наиболее продвинутых вариантах применяется искусственный интеллект.

Узнай, какие ИТ — профессии входят в ТОП-30 с доходом от 210 000 ₽/мес

Павел Симонов
Исполнительный директор Geekbrains

Команда GeekBrains совместно с международными специалистами по развитию карьеры
подготовили материалы, которые помогут вам начать путь к профессии мечты.

Подборка содержит только самые востребованные и высокооплачиваемые специальности и направления в
IT-сфере. 86% наших учеников с помощью данных материалов определились с карьерной целью на ближайшее
будущее!

Скачивайте и используйте уже сегодня:

Павел Симонов
Исполнительный директор Geekbrains

Топ-30 самых востребованных и высокооплачиваемых профессий 2023

Поможет разобраться в актуальной ситуации на рынке труда

Подборка 50+ бесплатных нейросетей для упрощения работы и увеличения заработка

Только проверенные нейросети с доступом из России и свободным использованием

ТОП-100 площадок для поиска работы от GeekBrains

Список проверенных ресурсов реальных вакансий с доходом от 210 000 ₽

Получить подборку бесплатно

pdf 3,7mb
doc 1,7mb

Уже скачали 25904

Поначалу такие программы не были особо популярны. О них знал только небольшой круг специалистов. Однако в 2009 году вышел фильм под названием «Аватар». Огромное количество зрителей увидели технологию в действии. В 2014 году Одри Хепберн «почувствовала» в рекламной кампании шоколада. Её лицо «перенесли» на лицо актрисы. В фильме «Ирландец» 2019 года выпуска лица актёров сделали гораздо более молодыми при помощи ИИ.

Стоит отметить, что раньше артикуляционная мимика создавалась вручную. Иными словами, специалисту нужно было самостоятельно программировать видео. Дипфейк начал функционировать в режиме реального времени спустя десятилетия после начала разработки данной технологии.

С каждым годом искусственный интеллект становится всё более функциональным. Он может выполнять рутинную работу человека, которому нужно лишь подготавливать исходные файлы и управлять программой. Теперь на видеохостингах можно найти огромное количество дипфейков.

Чтобы создать упрощённую модель лица, подойдет обычная фотография. Это является самым популярным способом создания дипфейков. В этом случае следует сформировать точную 3D-модель исходного лица.

После этого нужно отследить всю его мимику и движения. Затем исходное лицо меняется на другое, однако мимика остается той же. Чтобы добиться хорошего результата, необходимо провести тонкую настройку. Кроме того, потребуются большие процессорные мощности. Если же попытаться упростить задачу, то итоговое видео будет менее качественным.

Изначально создателями дипфейков являлись обычные люди, которые хотели получить видео развлекательного характера. Через некоторое время такой контент начал обрастать своей аудиторией. Теперь люди готовы отдавать свои деньги за подобные ролики. За небольшое видео среднего уровня качества человек может получить как минимум 50 долларов. Дипфейки используются не только для развлечения, но и в качестве инструмента, позволяющего снизить затраты на привлечение реальных актёров.

С точки зрения законодательства такие ролики не нарушают никаких правовых норм, если они не создаются с целью введения зрителя в заблуждение. Если же дипфейк используется для обмана людей, то автора могут привлечь к ответственности. Чтобы избежать юридических проблем, необходимо указать в титрах, что ролик является фейковым.

Причём неважно, какое лицо вы будете использовать в своих видео. Это может быть очень известный человек, который выступает против такой деятельности

Учтите, что доказать причинение вреда дипфейком крайне трудно.

DeepFaceLab

DeepFaceLab is a leading framework for face-swapping. This software is packaged with the right tools to help users produce high-quality face swaps. It is also the right tool for people looking for loose and flexible coupling to strengthen their pipelines without writing complicated boilerplate code. 

Key features

• Available for Linux and Windows
• It is a face-swapping framework
• Can be trained on Google Collab

DeepFaceLab is highly customizable, and users can modify various aspects of its pipeline to suit their needs. This tool allows you to do different things, such as swapping the face, de-aging the face, and manipulating the lips. 

Что такое дипфейк и с чем его едят?

Дипфейк (от англ. deep fake) — комбинация двух терминов: «глубинное обучение» (от англ. deep learning) и «подделка, ложь» (от англ. fake). Необходимо отметить, что количество одних только видео-дипфейков, циркулирующих в Интернете, стабильно увеличивается вдвое каждые полгода. Их общее число вряд ли поддается подсчету. По данным некоторых иностранных экспертов, всего за два года существования в относительном доступе инструментов по производству дипфейков только «очевидного» вредоносного видеоконтента выявлено свыше 85 тыс. единиц. При этом уместно предположить, что синтетический контент всех видов (видео, аудио, изображения и текст) может исчисляться сотнями миллионов единиц, одномоментно находящихся в цифровом пространстве.

Роман Романов: Искусственный интеллект в процессе принятия внешнеполитических решений

Для ответа на вопрос, что же такое дипфейк с технологической стороны вопроса, рассмотрим два самых распространенных его вида: видео и аудио. В основе процесса создания дипфейк-видео лежит работа генеративно-состязательных нейросетей (от англ. generative adversarial networks — GANs), анализирующих колоссальную по объему для человека, но не машины, выборку данных с целью изучения выражений лица «объекта», его характерных черт и мимики в целях дальнейшей имитации вышеперечисленных признаков. Процесс имитации состоит в том, что два человеческих образа «погружаются» в алгоритм глубокого обучения, который изучает их по множеству различных параметров (используется метод картографии лица) с целью максимально естественной замены одного лица на другое. Как правило, есть прямая взаимосвязь: чем больше анализируется разнообразного исходного видеоматериала, тем выше итоговое качество подделки.

С аудио-дипфейками процесс создания в целом аналогичен. Необходимо иметь аудиозаписи человека (чей голос планируется «клонировать») в различных ситуациях: интервью, публичные выступления, телефонные голосовые сообщения, реплики из бытовых разговоров и т.д. Они разбиваются на микрофрагменты и направляются на изучение алгоритмам глубоко обучения. Сейчас для создания подделки среднего качества достаточно 10–15 минут исходных данных. Однако, чтобы синтетический голос правильно или в характерном для «оригинала» ключе делал ударения, паузы, использовал междометья и пр. потребуется несколько часов разнообразных аудиозаписей. В этом случае происходит самое натуральное клонирование или синтез голоса. Его практически невозможно отличить от настоящего, не имея специализированных программ и технологий, выявляющих подделку по мельчайшим звуковым аномалиям.