3 days ago

На пути к мультилоре по "Лунтик и его друзья" .В данном посте будет вся информация о модели ,её характеристики и т д


Технически характеристики мультилоры :

Обучение будет происходить в программе: Onetrainer

Датасет :500 изображений (примерно)

Основное описание изображений : MiniCPM-V-2_6 8B.

Модель для обучения:flux 1.0 dev

Эпох : 100 (Тут другой метод обучения ,эпохами ,что типа качество зависит от ещё больше от эпох, а не от шагов )

Созданием триггер слов и коррекцией промтов : ChatGPT4o-mini

Данная мультилора будет мультимодальная. То есть она будет поддерживать много персонажей ,сцен и т д .

В ней я отказался от PromptGen-v1.5 в пользу более умной и большой модели.

В датасете будут чаще всего изображения с фоном а не просто пнг спрайты.Также весь датасет будет почти вручную прописан потому что я хочу добиться максимального качества

В датасете для каждого персонажа много разнообразных кадров ,поз, зимние версии.Триггер слова будут очень детально описывать основные черты персонажа .

В датасете ПОЛНОСТЬЮ НЕТУ кадров и спрайтов в

плохом качестве

Возможно так же что данная мультлора будет поддерживать (думаю криво) генерацию до 2-3 персонажей на одной сцене

К данной мультилоре будет также будет дополнительные маленькие лоры для новых плюшек которые не попали в основную модель

Тренировка основной мультилоры начнётся примерно вечером этой пятницы.

Щас я почти доделал датасет в плане изображений



0 comments

Loading...

Next up

Завтра должна начаться тренировка модели ,но наверное она начнётся в субботу потому что я не могу доделать датасет из за того что я сегодня не был весь день дома ну и завтра пол дня

Описание датасета стартовало .Подписи будут довольно подробными .Качество их будет максимально хорошее

Победа,я наконец нашёл идеальные модели для описания изображений.Они при стандартных промтах пишут не плохо и быстро (модели Qwen2-VL-2B-Instruct и OpenGVLab_InternVL2-2B).Для лучшего качества надо сделать всего лишь свой промт

Всем привет! В связи с тем, что по игре целых !7 МЕСЯЦЕВ! не выходило никаких новостей, решил показать вам анимацию Лунтыша! :)

Как вам?

Пиздец

МНЕ 16 ЛЕТ!

Ещё одна маленькая победа,осталось только найти идеальную модель для описания

Тут я над одной масштабной нейросетью работаю.Если получится то это значительно облегчит жизнь разработчикам Лунтиков x .Артикль

Захотел я, значит, нарисовать Лунтика Х в стиле blasphemous

Можно уже считать что датасет в плане картинок полностью готов.Я за вечер разобрал все спрайты и мне максимум из общего объёма добавить 10 спрайтов и немножко ещё удалить.Завтра будет самое сложное ,подписи