🧿 Meta.com = Facebook + Messenger + Instagram + WhatsApp + Oculus

🧙‍♀️SimSwap

DeepFake по одному снимку (one-shot).
По сути, это обычный encoder-decoder, но с прикольной начинкой внутри. В отличии от таких либ как DeepFaceLab где нужно было вручную размечать лица, потом самостоятельно обучать несколько недель, SimSwap работает на одном изображении за счет встроенного между encoder и decoder IIM (ID Injection Module). Этот модуль передает идентификационную информацию исходного лица в целевое лицо(target) на уровне признаков. Используя этот модуль, он расширяет архитектуру алгоритма смены лица, зависящего от идентичности, до структуры для произвольной смены лица. С помощью IIM, данный метод отлично подстраивается под лица в соответствии и исходными эмоциями.

📑 Paper | 💻 Code | 🤖 Colab

Как можно заметить по примерам, мне было лень делать deepfake только по одному персонажу, поэтому я тупо сделал по всем лицам что есть в кадре, но мне кажется что от этого стало только интереснее.

Вчера новость о ruDALL-E бобманула по всем новостям.
Я уже писал про DALL-E.
Вкратце, чо произошло. Наш любимый Сбер выложил, в открытый доступ две обученные модели ruDALL-E и ruCLIP в открытый доступ, но самое прикольное, что выложили XL и XXL ruDALL-E версию.

Пример по запросу: Очень красивая собака

ТГ бот: @sber_rudalle_xl_bot тут ждать от 60 минут
Сайтец тут ждать от 30 минут
🤖 Colab а тут зависит от подписки, если ее нет то ждать от 1-2 часов

Но ГЕРМАНА ГРЕФА ОНА ЗНАЕТ В ЛИЦО