Анонсировали Octane 2023.
Там две очень интересные фишки.

1. Нейронный рендеринг - похоже, что Юлик переизобрел Нерфы в Октане.

Нейронный рендеринг - это система обратного рендеринга: пользователи вводят свои отрендеренные картинки или фотографию, а OctaneRender генерирует ‘AI object’ , соответствующий ей.
Отой описывает полученный объект как "принципиально новый тип актива, который не является ни объемом, ни полигональной сеткой: это нечто совершенно иное".
Otoy describes the resulting object as a “fundamentally new asset type [that is] not a volume, not a mesh: this is something totally different”.
Заинтригованы?
Это уже интересно - ибо это коммерческий продукт, от которго ожидания выше, чем от бумаг и демок в интернете.

2. Вторая - это система потоковой передачи сцен, которую Отой сравнивает с Nanite, системой виртуализированной геометрии, представленной в Unreal Engine 5.0.
По словам Otoy, это устраняет снижение производительности, связанное с выходом за пределы памяти - когда размер визуализируемой сцены больше, чем помещается в памяти GPU - за счет необходимости использования SSD накопителя для передачи данных.

Сроки, как всегда у Октана непонятны, астрологи говорят, что через полгода.

http://www.cgchannel.com/2022/12/otoy-unveils-octane-2023/

Завезли open source версию dalle2
Говорят, текст понимает на уровне оригинального dalle2 и в целом генерит очень неплохие картинки

GitHub
Hfspace

А вот и продуктовый ролик к предыдущему посту

Nerf рендеринг позволяет сэкономить на роборуке и играться с камерой, объектами, светом, так как вам хочется, главное сначала отснять просто сцену. А потом можно и в SD как img2img, как в этом посте.
Кстати, автор nerf генерации тот же, что для SD ролика - Paul Trillo.

Снималась реклама в Амстердаме для Мазда Австрия.

Для создания сцены использовался - LumaAI

А мне очень приятно смотреть такой Тик-Ток формата монтаж. 2022 год показывает мне как скилл важнее становится имени.

Редактируемые Нерфы!
Похоже скоро с нерфами можно будет работать как с обычной трехмерной сценой - светить, шейдить, текстурить.
Очень интересно, что выкатит Otoy в этом смысле.
Куда катится мир?

https://twitter.com/_akhaliq/status/1605776988983234560

что, скажете, chatgpt врет?
Ну да, это только в интернете все всегда пишут правду)

Если надо подобрать стиль для генерации.
Огромная таблица художников найденных в SD v1.5

FFNeRV
Нейросетевой видеокодек, превосходящий HEVC (не вникал, кому интересно - сами почитайте).
Даже есть код, можно потестить

На Huggingface запустили дримбут-хакатон. Значит, кто кого перещеголяет в дообучении стебля.

Дали колаб где все подробно расписано на питоно-английском, даже с видеоуроками.

Кто хочет поучаствовать?

Adaptively-Realistic Image Generation from Stroke and Sketch with Diffusion Model

Генерация картинок по наброску.

Код

А вот я вам еще не показывал?

GeoCode: Interpretable Shape Programs

Генерация 3D-геометрии с рульками и редактируемыми параметрами

Мы используем нейронную сеть для сопоставления данного облака точек или эскиза с нашим интерпретируемым пространством параметров. После создания с помощью нашей процедурной программы формы могут быть легко изменены. Эмпирически мы показываем, что GeoCode может выводить и восстанавливать 3D-формы более точно по сравнению с существующими методами, и мы демонстрируем его способность выполнять контролируемые локальные и глобальные манипуляции с формами.

Код

chatgpt - бездна, трудно остановиться

Если вы хотите попробовать Chatgpt без танцев с бубном, да еще и бесплатно, то можете сделать это прямо сейчас. Благо, есть официальный API, и умельцы уже наплодили ботов.

- https://news.1rj.ru/str/GptOpenBot - раз
- https://news.1rj.ru/str/ChatGPT_BIAbot - два. У этого бота ограничение на максимальную длину запроса в 140 символов
- https://discord.gg/lukium - три. Заходите на дискорд сервер в канал chatgpt, пишете слэш / и выбираете одного из двух этих ботов (на скриншоте). Кстати, этот бот единственный из перечисленных дает возможность продолжить беседу в течение 30 секунд после ответа. Остальные вообще историю не запоминают.

Любой из этих ботов может временно не работать. Время ожидания ответа зависит от количества запросов в очереди.

Если вас это не устраивает, тогда берите бубен, ритуал в следующем посте

Инструкция получения доступа к сервисам Openai.com

1. Включаете VPN. Не все страны подходят. У меня получилось через локацию в UK. USA лучше не использовать если у вас нет своего телефонного номера в USA

2. Заходите на openai.com в нужный вам сервис, например chat.openai.com. Если страница не открывается, используйте другой браузер / отключите расширения / другой VPN / чистьте куки

3. Окошко входа/регистрации. Регистрируйте аккаунт. Конечно же не с российской электропочтой. Адрес на Gmail подойдет. Но только если он не в блеклисте openai. Если вы несколько раз пытались на него зарегаться и не получилось - используйте другой.

4. Если спросят страну, укажите ту, на которую настроен ваш VPN. Openai предоставляет доступ для ограниченного списка стран, так что если вас не устраивает UK, посмотрите этот список на сайте openai

5. Для подтверждения регистрации вам надо будет получить смс-код. Рекомендую использовать номер телефона той же страны на которую настроен ваш VPN. Чтобы вы долго не искали, я нашел бесплатный сервис на котором регулярно появляются новые номера: https://sms-acktiwator.ru Надо выбрать из последних добавленных номеров телефон на который уже приходили смс но не от openai. Надеюсь, этот сервис все еще работает.

6. Наслаждайтесь. Заходите на openai.com только через VPN всегда одной и той же страны. Если система в чем-то вас заподозрит, вам отключат доступ. Почистьте куки и попробуйте снова через несколько часов или на следующий день

Дайте знать была ли вам полезна эта инструкция
🤗