самая крутая сцена в интерстелларе конечно - когда макконахи, упав в черную дыру, застревает где то на границе измерений в книжном шкафу своей дочки. у нас с путти получилось что то вот такое. кстати я тут шагнул на следующий уровень генерации изображения - до свидания 8бит, здравствуй гладкая сочная картинка с кучей деталей. очень нравится!

Deepmind выпустил алгоритм, который позволяет генерировать картины разными математическими методами. По дефолту сеть обучена подходу к созданию описанным Рудольфом Арнхеймом теоретиком художественного искусства и кино.

На самом деле даже просто интересно почитать, как алгоритмами пытаются воссоздать техники живописи. А смотреть на процесс просчёта сродни зарождению органики.

https://youtube.com/shorts/jzyTnuY2tKc?feature=share

Коллаб присутствует, но сам не пробовал, с мобилы не удобно.

https://github.com/deepmind/arnheim/blob/main/arnheim_2.ipynb

Изображение сгенерировано моделью ruDALL-E от Сбера по запросу "анимоджи сталин"

Штош, гулаг так гулаг.

Высшая точка современного нейросетвого искусства

Там кстати (вместе с сами знаете чем) Сбер выложил и свою обученную с нуля Real-ESRGAN (это модель для увеличения изображений).

Да не одну, а целых три: х2, х4, х8. Обещают улучшенную работу с лицами по сравнению с исходником.
Ру Колаб тут

На картинке - "смайл любовь к сберу"

Мам, я в телевизоре.

Опанцы. Разделил 3-е место в стикер-апп конкурсе телеграм. Приятно оказаться среди крутых чюваков!

Ну, собственно, функционал аппки есть в боте @face2stickerbot

Роботов под суд

Вышла интересная работа про стилизацию с помощью StyleGAN под пафосным названием "Stylegan Of All You Need Trades"
В данном случае, StyleGAN2, но ничто не мешает применить и на новую сетку.

Авторы взяли известные фишки и собрали в одном общем репозитории.
Например, генерацию панорам, перенос нужных фич с лица на лицо, стилизацию и прочее. В целом, ничего радикально нового нет, просто все приведено в порядок, и собрано в одном месте.
Тот же layer blending реализован в удобном колабе.

Гит
Папирус
Колаб

Очень жду, когда публикации начнут выходить не под заголовками "<insert any architecture name here> is all you need", а как на vc.ru:
"я задолбался тюнить <modelname> и придумал <minor insignificant tweak that has less effect than changing random seed>, или даже "датасайентисты ненавидят этот трюк. Нужно просто... "

Там выкатили двухголовый колаб для VQGAN+CLIP. Отличие - за результат борются два CLIP. Есть варианты на выбор: ViT-B/32 и 16, RN50x16 и 4. В теoрии картинка должна быть ближе к текстовому запросу, как по факту - будем посмотреть.

Чтоб завелось c ViT+RN50, нужно поставить разрешение поменьше.

На картинке "Ocean storm at sunset by Ivan Aivazovsky" ViT-B/32 + 16

Если бы документация по tensorflow была человеком