1 year ago

Небольшой словарь связанный с нейросетями. Здесь те слова которые наиболее часто я использую.Он создан чтобы люди понимали меня и контекст моих постов.Данный словарь будет иногда пополняться ,так что иногда заглядывает сюда


LLM (Large language model) - модель для генерации текста,чаще всего основано на архитектуре "Трансофрмер" .

VLM (Vision language models)- тоже самое что и LLM но умеет анализировать изображение (или видео) ,отвечать вопросы об нём и т д.

Fine-tuning-дообучение модели на своих данных,при тренировке изменяется вся модель (веса).

LORA (Low-rank adaptation ) - тоже самое что и Fine-tuning но на тренировки изменяется только часть модели,так оно обучается быстрее и дешевле .

MultiLora - тоже самое что и лора только для нескольких объектов.Требует точных подписей для понимания контекста

DIT - одна из типов диффузии которая контролируется с помощью Трансформера ,что позволяет улучшить качество генерации.Подходит для видео,аудио,картинок

Трансформер - одна из самых популярных архитектур для LLM моделей. Работает при генерации примерно так :если очень простыми словами то она предсказывает каждый токен(символ)за раз .Во время генерации он смотрит на написанное что бы предсказать следующие слово и добавляет в текст пока не закончит последовательность

Диффузия - Одна из архитектуру которую используют для генерации изображений .кратко расскажу как она работает во время генерации ,модель берёт чистый шум гауса и удаляет из него шум что бы получить изображение которое следует по промту

GGUF - формат хранений LLM,VLM и других тектовых моделей.Он разработан для оптимизированн для быстрой загрузки и сохранения моделей.В нынешнее время так же используется для моделей генерации изрбражений

FLUX - линейка крутых открытых моделей для генерации картинок

Stable diffusion - линейка открытых моделей для генерации картинок

Датасет - набор данных

ComfyUI - многофункциональный веб интерфейс для запуска нейросетей.Функционад можно расширять с помощью кастомных год

Stable Diffusion WebUI- веб интерфейс больше предназначенный для генерации изображений .Есть расширения но они только для мелких вещей.Основан на gradio



4 comments

Loading...

Next up

Большая история моих нейросетей по Лунтику

Чуть более глобальные новости про Luntik Flux.

Небольшие новости про Luntik Flux .Артикль

Обновление 2.0.0 Новый персонаж, концовки, удаление Нико, Хардмод и другое!!!

Было принято одно важное решение об Luntik Flux.

Датасет будет увеличен с 500 изображений до 1130 изображений для улучшения качества и добавления новых персонажей

Moonzy Lapse — Глава №5 «Честное предупреждение» — Трейлер

Об изменениях в версии ниже

(спойлеры к предыдущим главам, не рекомендуется читать, если вы чувствительны к спойлерам и не играли/не смотрели предыдущие главы!)

Сегодня у меня день рождения!

Пиздец,страшнааа(Неудачная генерация)

У меня появился попугай!

Пишу для будущих заметок: я разработал теоретическую новую гибридную архитектуру для генерации длинных аудиотреков с пониженным использованием VRAM. Эта архитектура также легко модифицируется, позволяя повысить контроль над процессом генерации.