• Главная
  • Статьи
  • Новости
  • Кострище
  • Еще
Статьи
Войти
Статьи
Войти
Статьи
Новости
Лента
Правила
О Проекте
FAQ
Поддержать проект
lucky boy24 мин назад
Комментарий к записке: Так же посмотрел оба сезона Поднятие уровня в одиночку. Слышал противоречивые мнения о нем, и могу …
Ему не повезло с читами ибо там не всё так просто как кажется
Ильящер2 часа назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Как говориться, "don't get me started" - для шахматиста пешка - очень сложная тема. Филидор говорил…
Фог4 часа назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
yaboroda,ну, игрок в этом плане прям божество, зависшее над всем. А ферзь - карающая длань этого бо…
yaboroda4 часа назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Фог, владыка судеб это только игрок. Ферзь точно так же не выбирает, куда ему ходить.
Фог4 часа назад
Комментарий к записке: Вот всем хороша серия ГТА, но хотелось бы чтоб в ней было немного скайримовости. Чтоб какой-нибудь …
А я бы хотел старой доброй GTA2. Чтобы ты чисто работал на разных бандитов, но при этом не в линейн…
Фог5 часов назад
Комментарий к записке: Читая записку Фога, я сделал для себя следующие выводы:На КК всё ещё полно юмористов и любителей по…
Надо тоже попробовать заварить себе кофе, ради интереса, вдруг тоже достигну столь возвышенно/филос…
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
The Lost Man, один гендер, чтобы править всеми.
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
mafbot, я думал упомянуть этот нюанс. Но решил, что это относится к атакующим свойствама фигуры, а …
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
The Lost Man, ну вот да, у пешки есть шанс самой стать владыкой судеб, но только если она покорно п…
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Panda Shiren, эх, Панда, тебя бы в редакторы моей пока недописанной книги... Правда, есть вероятнос…
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Фома Киняев, если она ещё доживёт до этого. В рамках мира шахмат, как я понимаю, это из серии "а во…
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Фломастер,это одна из моих любимых цитаток. Знаю, что в наш век постмордернизма любые цитатки обесц…
Фог5 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
MosesV,
The Lost Man6 часов назад
Оставил записку у Кострища.
Ну Мозес там чет вкусное ест, так что я пожалуй тоже че-нить поем#ВремяЖратвы
The Lost Man6 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
The Lost Man, о, к этому моменту нашел мем
mafbot6 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
Всё, что может делать пешка - это упрямо идти вперёд, на одно и то же кол-во клетокТут бы надо вспо…
MosesV7 часов назад
Комментарий к записке: Вот всем хороша серия ГТА, но хотелось бы чтоб в ней было немного скайримовости. Чтоб какой-нибудь …
medusa219, делай
medusa2197 часов назад
Комментарий к записке: Вот всем хороша серия ГТА, но хотелось бы чтоб в ней было немного скайримовости. Чтоб какой-нибудь …
MosesV, Ок, но тогда я хочу ограбить банк, на вырученные деньги накупить картошки и завалить ею вес…
The Lost Man8 часов назад
Комментарий к записке: если будет свободный день, я знаю, чем заняться
Это вызывает тревожность... Я всегда задумывался о том, что в мире столько автомобилей и все они ку…
Xander Grishchenko8 часов назад
Комментарий к записке: #фог_пишет Делая себе кофе, меня вдруг посетила одна мысль: а верят ли пешки в судьбу? Вы, наверняк…
The Lost Man, вспоминается мем "finally, chess 2"
Anzhc
  • 74Монеток
  • 2Постов
  • 0Записок
  • Статьи
  • Записки
  • Комментарии
  • Ордена
  • Anzhc
    31 декабря 2022

    Зиро Хатт, А мне наверное стоит достать из комода GT 430 с двумя гигами и на ней потестить?

  • Anzhc
    31 декабря 2022

    Зиро Хатт, Пиздец...

  • Anzhc
    30 декабря 2022

    Женские трусики, Но всё, что я написал, верно на текущий день. Развивается всё быстро, не помню, что бы какие-то новые техники не открывались реже раза в неделю. Постоянно исследуются новые пути оптимизации.
    Когда я вкатывался в генерации, даже что-то простое можно было генерировать минимум на 6 гигах памяти, а сейчас можно даже на 2 гигах.

    Хотя тренировки вряд ли опустятся ниже 4х, ибо это стандартный размер SD 1.x-базированных моделей.

    Для референса, SD 1.х линейка моделей относительно очень компактная, всего 860 миллионов параметров. Дальше будет только больше. Языковые модели уходят в миллиарды, некоторые в сотни миллиардов, и хостятся только на кластерах.
    SD 2.x уже весит 5 гигов, имеет не сильно больше параметров, около 869 миллионов что ли, не помню.

    Нужно смотреть, если кто-то найдёт способ тренировать только несколько слоёв одновременно, в зависимости от лимита памяти, хотя... Вроде бы это и есть техника тренировки Дримбута на менее чем 24 гигах, сливая крупную часть данных в оперативную память... Сложно сказать, как скоро появится более жёсткая оптимизация.

    Но для конкретно тренировки моделей, именно с нуля, базы, оптимизаций не видел. Да и не под силу это всё-таки для личного пользования, по крайней мере моделей на уровне SD. Там же тренировки на миллиардах картинок идут.

  • Anzhc
    30 декабря 2022

    Женские трусики, Быть богатым, очевидно. Для плебсов как мы такое не по силам. Там требуется более 30 гигов памяти видеокарты, что не доступно на консумерских, максимум 24 на 3090/4090.

    Нам доступен только максимум файн-тюн уже тренированных моделей. И тот, в зависимости от типа тренировки только для обладателей 3080+.
    ЛОРА можно тренировать на 6 гигах(но это не точно), но лучше 8. Но я не могу сказать, насколько это эффективно для крупного изменения модели. Я максимум делал на 620 картинках, это относительно очень небольшой файн-тюн, который многому не научит, использовал для улучшения общего качества генераций.
    Про Дримбут не скажу, так как это случай, где нужно хотя бы 10 гигов, которых у меня нет. Но людям ЛОРА вроде заходит больше, но появилась она недавно, поэтому прямо разницу пока назвать трудно.

    Можно сильно изменять генерацию с помощью надстройки в виде гиперсетей, но саму модель это не тренирует.
    Эмбеддинги позволяют создать знание о чём-то конкретном через тренировку инверсии, но это так же не меняет модель, а позволяет добавлять новые токены, но отдельно от модели, хоть и работать они будут лучше всего с той, на которой тренированы.

    Ни одна из вышеперечисленных тренировок не работает на 4 гигах. 6 это самый минимум, и тот, только для эмбеддингов и, возможно, ЛОРА, но это не реалистично проводить крупную тренировку на медленных и слабых видеокартах.

  • Anzhc
    30 декабря 2022

    Софт, Женские трусики, было бы о чём писать там в общем-то. Вот все нужные теги, на которых были тренированы аниме модели.
    https://danbooru.donmai.us/wiki_pages/tag_groups

  • Anzhc
    26 декабря 2022

    issey, У амуде вроде просто нет аналога CUDA ядер и всякой экспериментальной фигни, которая ускоряет вычисления ИИ. Соответственно и оптимизировать под них нечего. Хотя вроде в 7000 какие-то такие блоки завозят, но, один хер, если обновляться, то уж на нвиде. Да и сколько времени ещё пройдёт, пока напишут что-то стабильное, если у них появится своя фишка для ускорения ИИ.

  • Anzhc
    25 декабря 2022

    Kufos, Кек

  • Anzhc
    24 декабря 2022

    Жук, Та хз, думаю, если пользователь захочет с чем-то ещё поиграться, то он более-менее знает, что делает, я хотя бы надеюсь на это, и мои гайды ему будут ни к чему. Всё-таки здесь для обычного народа, мы знать не знаем как играться с питоном, ну разве что со своим xD

  • Anzhc
    24 декабря 2022

    issey, Да есть он, только толку, амуде это боль...

  • Anzhc
    24 декабря 2022

    Жук, Ну про питон я поправил, ставим только рекомендуемую. Боюсь пользователю придётся научиться искать ответ на проблему на гитхабе в любом случае, если пользователь захочет что-то кроме базового интерфейса xD

    Отдельная среда, ну это же будет сложнее, чем просто поставить так, правильно же? Я хотел сделать самый простой, что бы большинство не подумало "да ну нахер с этим ебаться", поэтому за базу взял популярный гайд от Волди, который имеет такие вот шаги. Раньше было по другому, но я не программист, разницу не пойму. Ставил с помощью анаконды, вроде что-то такое создавалось, типа отдельная среда вроде, но я не разбираюсь.

    За картинки - это я догадывался, но думаю сам понимаешь, у меня оно уже стоит, а устанавливать заново эти гигабайты питона ради картинок такая себе идея. е_е

    Эх, Винда ¯\_(ツ)_/¯

    Спасибо за фидбэк. Если буду писать гайды по расширениям - там будут картинки, для них не трудно сделать :D

Назад
  1. 1
  2. 2
/ 2
Вперед
  • Правила
  • О Проекте
  • FAQ
  • RSS
  • Поддержать Проект