Великий рандом или универсальность в промптах

Ты уже скорее всего видел гуляющий по сети промпт, который разделяет редактируемую картинку на девять сюжетных сцен.

Таких примеров много, но самый ранний из тех, что я нашёл, это пост от TechHalla от 29 ноября 25. Там он показал свою инструкцию и «волшебный» способ размножения кадров сценария на 9 кадров за один промпт, что вызвало огромную волну восхищения и стало базой для многих нейронщиков в их рабочих процессах. Та самая волшебная кнопка, которая с помощью инструкции даёт множественный результат без осмысления происходящего и без необходимости думать.

Промпт хорош, но у него есть минусы, и далее я расскажу, как от этих минусов избавиться.

Если ты посмотришь на инструкцию на картинке, у неё точная структура того, что должно происходить. Шоты разделены с уточнениями под конкретную постановку камеры, с правильными режиссёрскими терминами. Инструкция чётко говорит нейронке: «Поставь сюда, показывай это». В плане контроля збс, 10 из 10. Но на универсальный промпт как-то не похоже, да? Получается так, что какую бы ты картинку или фотку ни скинул, будут те же самые ракурсы, что не всегда нужно, так как разные сюжеты требуют разных подходов и настроений.

И вот ты думаешь: «А чё, добавим больше ракурсов через запятую и скажем, чтобы нейронка использовала всё в рандомной связке». Да, такой подход может работать, но он опять же ограничен. А чем больше текста, тем слабее фокус нейронки и меньше творческой свободы из-за текстовых рамок в промпте.

А теперь мы приступаем к самому вкусному: как всю эту машину запустить на универсальность.

Есть два способа:

1) Промпт с высокой степенью рандомности, но при этом задающий тон запроса пользователя

What’s next? Show me nine still frames from the film. Keep the same color grading, visual style, graphics, and characters as in my reference. Do not repeat any footage.

(примеры выше, думаю, ты поймёшь, что это моё)

Ты как бы просишь нейронку ответить тебе визуально, не играя с ней в доминирующего босса, и лишь слегка уточняешь особенности.

Таким образом нейронка выдаст тебе максимально разнообразный контент по локациям и действиям, сохраняя айдентику мира и всех персонажей из реф-кадра.

2) Инструкция

Этот способ сложнее и требует диалога с нейронкой, чтобы составить идеальную рандомизацию. Не всегда работает, но помогает разнообразить мышление модели.

Создав инструкцию, ты добавляешь дополнительный слой общения с моделью под твой конкретный кейс, где она сможет выдавать тебе бесконечное разнообразие сложных технических промптов. Своей инструкцией поделюсь чуть позже, а то, думаю, этот пост получился длинноватым. Также я там расскажу, как добиваться улучшения инструкции, прогоняя модель «подумать» заново.

В последнюю неделю у меня появилось несколько тем, о которых хочу тебе рассказать, и в ближайшее время жди различные уникальности о взаимодействии с нейронками и, в целом, о мышлении и работе с ними.

😂 Сохрани в избранное, ставь реакции, делись с единомышленниками и подписывайся на канал!

AcidCrunch

Волшебный промпт «Сделай красиво» в Seedance 2.0

Совсем недавно я рассказывал тебе, как можно заставить нейросеть с помощью короткого универсального промпта, без чётких правил, генерировать уникальную сетку 3×3 с продолжением сюжета. Сегодня хочу показать тот же самый способ, но уже для Seedance 2.0.

У меня долго не получалось «оседлать эту лошадку» так, чтобы она выдавала интересные генерации без чётких инструкций. Я пробовал и короткие промпты, и варианты с таймингами, и длинные инструкции, но мне хотелось получить тот самый «вау-эффект», как в примерах из интернета.

В итоге я вспомнил, что нейросеть всё-таки «думающая», а значит, с ней должен сработать тот же трюк, который я провернул с Бананой. Я просто взял и немного переделал тот промпт под динамику. Самое прикольное, что получилось! Видео стали динамичными и начали сами рассказывать историю, опираясь на жанровую составляющую изображения.

Сначала указываешь ссылки на изображения и видео и описываешь, что они из себя представляют: элементы, референсы, композицию или движение, музыку из видео.

Например:

@image1 — референс персонажа
@image2 — используй копьё как элемент
@image3 — используй задний фон как первый кадр
@video1 — возьми движение и звук

А в конце волшебный промпт:

What’s next? Show me nine scenes from the film. Keep the same color grading, visual style, graphics, and characters as in my reference. The storyline should be coherent, dynamic and interestingly staged with a well-developed narrative.

Да, это, конечно, не про полный контроль над историей, как многим хотелось бы. Но подход получился интересным: его можно использовать как быстрый способ создания увлекательного контента или как отправную точку для идеи будущего сюжета, который ты уже будешь дорабатывать вручную.

😂 Сохрани в избранное, ставь реакции, делись своими наблюдениями в комментариях и подписывайся на канал!

AcidCrunch