Гайд по правильному промпт-крафтингу универсальных стилей для Stable Diffusion + промпт + арты в конце
22934
Статьи

Гайд по правильному промпт-крафтингу универсальных стилей для Stable Diffusion + промпт + арты в конце

23
22934

Комментарии

в разделе "Бонусные шаги" картинка не показывается

в разделе "Бонусные шаги" картинка не показывается

inpwbusina, Ля, видимо размер большой, слишком широкая... Если найду как редачить, щас мелкую волью с меньшим количеством генераций.

в разделе "Бонусные шаги" картинка не показывается

inpwbusina, Обновил.

Я думал, что эта штука платная

Я думал, что эта штука платная

Hesko, Нет. Платные DALL-E м MidJourney. Ну и вариация в виде NovelAI, так как они разрабатывают свою проприетарную платформу. Сам Stable Diffusion опен сурсный и доступен всем.

Спаcибо за статью, где еще можно почитать подробнее по Stable Diff ?

Спаcибо за статью, где еще можно почитать подробнее по Stable Diff ?

Женские трусики, Ну, пока явно не на KKnights. Я постепенно перенесу свои статьи сюда, возможно вечером, быстро это сделать не позволяет не сильно отзывчивый редактор.

Но я так понимаю, нужны статьи по базовой установке и использованию? У меня таких не будет, но я знаю, что на ДТФ или Пикабу есть очень базовые статьи на эту тему. Но не стоит верить тому, что они пишут по отдельным фичам, так как я далеко не один раз видел неправильную инфу в них.

Возможно я напишу что-нибудь базовое для KKnights, но пока у меня готовы статьи только по продвинутым фичам и тренировкам.

Женские трусики, Ну, пока явно не на KKnights. Я постепенно перенесу свои статьи сюда, возможно вечером, быстро это сделать не позволяет не сильно от…

Anzhc, хорошо, спасибо большое, буду ждать

Anzhc, хорошо, спасибо большое, буду ждать

Женские трусики, возможно я напишу статью-сборник тегов в ближайшее время

Женские трусики, возможно я напишу статью-сборник тегов в ближайшее время

Софт, Женские трусики, было бы о чём писать там в общем-то. Вот все нужные теги, на которых были тренированы аниме модели.
https://danbooru.donmai.us/wiki_pages/tag_groups

Софт, Женские трусики, было бы о чём писать там в общем-то. Вот все нужные теги, на которых были тренированы аниме модели. https://danbooru.donmai.u…

Anzhc, а как самому тренить модель?

Anzhc, а как самому тренить модель?

Женские трусики, Быть богатым, очевидно. Для плебсов как мы такое не по силам. Там требуется более 30 гигов памяти видеокарты, что не доступно на консумерских, максимум 24 на 3090/4090.

Нам доступен только максимум файн-тюн уже тренированных моделей. И тот, в зависимости от типа тренировки только для обладателей 3080+.
ЛОРА можно тренировать на 6 гигах(но это не точно), но лучше 8. Но я не могу сказать, насколько это эффективно для крупного изменения модели. Я максимум делал на 620 картинках, это относительно очень небольшой файн-тюн, который многому не научит, использовал для улучшения общего качества генераций.
Про Дримбут не скажу, так как это случай, где нужно хотя бы 10 гигов, которых у меня нет. Но людям ЛОРА вроде заходит больше, но появилась она недавно, поэтому прямо разницу пока назвать трудно.

Можно сильно изменять генерацию с помощью надстройки в виде гиперсетей, но саму модель это не тренирует.
Эмбеддинги позволяют создать знание о чём-то конкретном через тренировку инверсии, но это так же не меняет модель, а позволяет добавлять новые токены, но отдельно от модели, хоть и работать они будут лучше всего с той, на которой тренированы.

Ни одна из вышеперечисленных тренировок не работает на 4 гигах. 6 это самый минимум, и тот, только для эмбеддингов и, возможно, ЛОРА, но это не реалистично проводить крупную тренировку на медленных и слабых видеокартах.

Anzhc, а как самому тренить модель?

Женские трусики, Но всё, что я написал, верно на текущий день. Развивается всё быстро, не помню, что бы какие-то новые техники не открывались реже раза в неделю. Постоянно исследуются новые пути оптимизации.
Когда я вкатывался в генерации, даже что-то простое можно было генерировать минимум на 6 гигах памяти, а сейчас можно даже на 2 гигах.

Хотя тренировки вряд ли опустятся ниже 4х, ибо это стандартный размер SD 1.x-базированных моделей.

Для референса, SD 1.х линейка моделей относительно очень компактная, всего 860 миллионов параметров. Дальше будет только больше. Языковые модели уходят в миллиарды, некоторые в сотни миллиардов, и хостятся только на кластерах.
SD 2.x уже весит 5 гигов, имеет не сильно больше параметров, около 869 миллионов что ли, не помню.

Нужно смотреть, если кто-то найдёт способ тренировать только несколько слоёв одновременно, в зависимости от лимита памяти, хотя... Вроде бы это и есть техника тренировки Дримбута на менее чем 24 гигах, сливая крупную часть данных в оперативную память... Сложно сказать, как скоро появится более жёсткая оптимизация.

Но для конкретно тренировки моделей, именно с нуля, базы, оптимизаций не видел. Да и не под силу это всё-таки для личного пользования, по крайней мере моделей на уровне SD. Там же тренировки на миллиардах картинок идут.

Отдельная статья, про то, как делать такую красивую аи Мону, будет? )

Отдельная статья, про то, как делать такую красивую аи Мону, будет? )

Grerya, Хех. Там случай немного уникальный, не думаю, что выйдет повторить, но можно другую, чуть менее художественную красоту генерить. Но отдельной статьи не будет, тут и эта свою роль играла, и будущая статья про гиперсети, что в данном случае и является тем неповторимым фактором.

Отдельная статья, про то, как делать такую красивую аи Мону, будет? )

Grerya, С текущими тренировками гиперсетей, и какие результаты они дают, я не знаю, как повторить то, что делает моя гиперсеть. Ибо она конкретно почему-то делает стиль, а не теги, которые она училась делать 60 тысяч шагов. Хотя может быть в этом и суть, что она научилась их отделять за такую долгую тренировку... Очень трудно узнать, ибо тренировки таких гиперсетей требуют несколько дней, или часов 10-15 времени за раз.

Grerya, С текущими тренировками гиперсетей, и какие результаты они дают, я не знаю, как повторить то, что делает моя гиперсеть. Ибо она конкретно поч…

Anzhc, А если в общих чертах? А то там аж, два арта с Моной, хоть теги примерные, все дела, или все аналогично статье? )

Anzhc, А если в общих чертах? А то там аж, два арта с Моной, хоть теги примерные, все дела, или все аналогично статье? )

Grerya, Где 2? Один, просто продублирован. Проблема не в том, что это невозможно повторить. Я могу её перегенерировать когда угодно, и у меня не вызовет проблем сгенерировать тонну годного арта с Моной. Прпоблема в том, что у обычного человека на это не будет времени и знаний. Есть много переменных, которые у меня будут отличаться, как например широта слоёв гиперсети и их количество, численность и качественность датасета, переменный рейт тренировки, который у меня относительно детальный, хотя я до сих пор считаю, что он требует доработки.

Я методом научного тыка перепробовал много различных комбинаций, но данная гиперсеть, которая используется мною постоянно, была тренирована ещё до фиксов, её просто сейчас не повторить. Я НЕ знаю, будет ли сеть с идентичными настройками сейчас лучше или хуже в том, для чего она используется. Очень уникальный случай.

Отдельная статья, про то, как делать такую красивую аи Мону, будет? )

Grerya, прости, я тебя в чс случайно кинул :с Думал "удалить пользователя с сайта" это какой-то прикол, что выдаст мне забавную реакцию, а тут так ЧС называется. ЪУЪ. Ещё и убрать оттуда нельзя человека(

Grerya, прости, я тебя в чс случайно кинул :с Думал "удалить пользователя с сайта" это какой-то прикол, что выдаст мне забавную реакцию, а тут так ЧС…

Kufos, Кек

Grerya, прости, я тебя в чс случайно кинул :с Думал "удалить пользователя с сайта" это какой-то прикол, что выдаст мне забавную реакцию, а тут так ЧС…

Kufos, Не удаляй меня больше, мне жить нравится! Ах, да, ты же наверное меня теперь не видишь, редиска.

Kufos, Не удаляй меня больше, мне жить нравится! Ах, да, ты же наверное меня теперь не видишь, редиска.

Grerya, кстати вижу, мож админы заметили коммент и поправили)