Сейчас попробовал поиграться со Stable Diffusion
круто конечно, что накопилась огромная база данных различных моделей, лоров и т.д. Выглядит ниче так Теперь цель разобраться, как тренировать свою модель, чтобы создавать интересные приколюхи
круто конечно, что накопилась огромная база данных различных моделей, лоров и т.д. Выглядит ниче так Теперь цель разобраться, как тренировать свою модель, чтобы создавать интересные приколюхи
This media is not supported in your browser
VIEW IN TELEGRAM
Старые попытки влиться в хайповый моушн дизайн
Наконец-то я попробовал натренировать свою модель LoRa
LoRa (Low-Rank Adaptation). Этот метод позволяет адаптировать большие модели для новых задач, тренируя только небольшую часть параметров. Это значительно ускоряет процесс и экономит ресурсы. С помощью одной модели можно натренировать, например, персонажа, стиль рисовки, позу, предмет, эмоцию и т.д.
Я несколько раз пытался сделать это локально на своем компьютере, но у меня ничего не получалось. Процесс занимал около 9 часов и не давал результатов. Тогда я решил воспользоваться сервисом Civitai, на котором обычно смотрю референсы для промтов. Оказалось, что стоимость доступа вполне приемлема, и я решил попробовать
Я собрал около 60 фотографий моего персонажа и написал к каждой описание (промт). Загруженный материал обрабатывался примерно 2 часа. И вот, моя первая LoRa готова :)
Вы тоже можете попробовать мою LoRa прямо на этом сайте или скачать её и поэкспериментировать на своём компьютере. Вот ссылка: https://civitai.com/models/651108/gun-park-lookism
LoRa (Low-Rank Adaptation). Этот метод позволяет адаптировать большие модели для новых задач, тренируя только небольшую часть параметров. Это значительно ускоряет процесс и экономит ресурсы. С помощью одной модели можно натренировать, например, персонажа, стиль рисовки, позу, предмет, эмоцию и т.д.
Я несколько раз пытался сделать это локально на своем компьютере, но у меня ничего не получалось. Процесс занимал около 9 часов и не давал результатов. Тогда я решил воспользоваться сервисом Civitai, на котором обычно смотрю референсы для промтов. Оказалось, что стоимость доступа вполне приемлема, и я решил попробовать
Я собрал около 60 фотографий моего персонажа и написал к каждой описание (промт). Загруженный материал обрабатывался примерно 2 часа. И вот, моя первая LoRa готова :)
Вы тоже можете попробовать мою LoRa прямо на этом сайте или скачать её и поэкспериментировать на своём компьютере. Вот ссылка: https://civitai.com/models/651108/gun-park-lookism
🔥2👏1
Тимо и Работа
Наконец-то я попробовал натренировать свою модель LoRa LoRa (Low-Rank Adaptation). Этот метод позволяет адаптировать большие модели для новых задач, тренируя только небольшую часть параметров. Это значительно ускоряет процесс и экономит ресурсы. С помощью…
Первые две фотографии в посте — это те самые скриншоты, на которых я тренировал модель, а остальные — полностью сгенерированные изображения. Разница заметна, и результаты очень даже ничего.
Для нормальной генерации рекомендую поставить LoRa на 100% и использовать модель Pony Diffusion XL v6 — так результаты будут наилучшими.
Для нормальной генерации рекомендую поставить LoRa на 100% и использовать модель Pony Diffusion XL v6 — так результаты будут наилучшими.
🔥2
Forwarded from Сергей Булаев AI 🤖
Попросил Claude сделать вам инфографику шпаргалку (дал ему вот эту схему как источник) о классических проблемах взаимодействия с генеративным ИИ. Не то что бы у него с первого раза получилось, минут 30 помучиться пришлось, но доволен результатом.
Давно заметил, что при использовании реакта хорошо получается что то вполне похожее на слайды и документы. Исходники тут.
Сергей Булаев AI 🤖 - об AI и не только
Давно заметил, что при использовании реакта хорошо получается что то вполне похожее на слайды и документы. Исходники тут.
Сергей Булаев AI 🤖 - об AI и не только
🔥1
Решил попробовать что-то посложнее
Натренировать модель на стиль рисовки автора манхвы (PTJ). Отобрал 110 кадров, каждый апскейлил и отчищал от лишних деталей, к примеру на многих кадрах был текст в кружках, все пришлось зарисовывать руками.
За основу также взял Pony Diffusion V6
Для каждой картинки написал текстовое описание, в основном его структура выглядела так - (сколько людей в кадре, внешний вид, куда смотрит, в каком положении находится, и фон, также какие то детали кадра) - это заняло немало времени из-за количества фоток
Моя цель - не генерация картинок из текста, а преобразование моих скетчей/рисунков в полноценные кадры для комиксов/манги. Это должно ускорить процесс рисования
Результат не идеален, перерисовывает мои рисунки он хорошо, но не с первого раза, приходится играться с настройками чтобы добиться нужного результата, также кадры в движении даются плохо. Думаю исправить все это в следующих моделях
Выше можете глянуть результаты и как я готовил фотки к тренировке. ссылка на модель
Натренировать модель на стиль рисовки автора манхвы (PTJ). Отобрал 110 кадров, каждый апскейлил и отчищал от лишних деталей, к примеру на многих кадрах был текст в кружках, все пришлось зарисовывать руками.
За основу также взял Pony Diffusion V6
Для каждой картинки написал текстовое описание, в основном его структура выглядела так - (сколько людей в кадре, внешний вид, куда смотрит, в каком положении находится, и фон, также какие то детали кадра) - это заняло немало времени из-за количества фоток
Моя цель - не генерация картинок из текста, а преобразование моих скетчей/рисунков в полноценные кадры для комиксов/манги. Это должно ускорить процесс рисования
Результат не идеален, перерисовывает мои рисунки он хорошо, но не с первого раза, приходится играться с настройками чтобы добиться нужного результата, также кадры в движении даются плохо. Думаю исправить все это в следующих моделях
Выше можете глянуть результаты и как я готовил фотки к тренировке. ссылка на модель
🔥5