DALL·E: Creating Images from Text

DALL·E представляет собой версию GPT-3 с 12 миллиардами параметров, она обученна генерировать изображения из текстовых описаний. Обучали ее на датасете из пар текст-изображение. DALL·E обладает огромным репертуаром генеративных возможностей, включая возможность создания антропоморфных животных и других необычных объектов, комбинирующих совершенно нетривиальные свойства, например "кресло в форме авокадо".

Мини версию можно пожмякать тут

📑 Paper | 💻 Code

Результат генерации по запросу "The sexiest man in the world"

Через месяц-полтора сдача матана, мы собрали для вас треки группы #НТР которые помогут быстрее выучить основные теоремы.

Лично мне это и помогло сдать Битюкову

🎴 StyleGAN3

Вчера вечером NVIDIA выложила StyleGAN3, статью которой выложили еще в июне (Alias-Free Generative Adversarial Networks)

🤔 Проблема StyleGAN и StyleGAN2
В процессе синтеза StyleGAN’ами изображений возникает нездоровая зависимость паттернов от абсолютных пиксельных координат. Как это проявляется? А проявляется это в виде того, что текстура кажется приклеенной к координатам, а не к поверхностям генерируемых изображений. В новой версии, нашли причину из-за которой возникает это проблема и избавились от неё.

📑 Paper | 💻 Code | 🤖 Colab | 🖥 Сайт

Поскольку 8 институт перевели на дистанционную форму. Нам нужно понять, сколько людей завтра придёт. Поэтому

Долго пытался разобраться, как в StyleGan3 запихнуть Погосяна, но так и не разобрался. На выходных попробую доделать.

Сделал связку из CLIP -> StyleGan3

CLIP генерирует векторное представление изображения через текстовое описание, а StyleGan3 пытается привести начальное изображение к вектору от CLIP.

Вот что вышло по описанию: King Billy Herrington portrait in style of real life

Для тех кто остался дома, наш дедуля @MaximEremin поднял стрим на твиче. Сегодня будет разбирать Docker и Kubernetes.

Запись стрима будет ближе к вечеру.
https://www.twitch.tv/itcentremai

Практииически получилось, на выходных точно добью и выложу 🤖Colab версию