Это по моему предположению одинаковые нейросети .Как я это понел,да всё просто одна нейросеть генерирует ровно до 95 секунд другая также.просто там последняя модифицированная что бы можно генерировать голос и текст песни .И тоесть чисто технически если модифицировать немного stable audio то и если получится то улучшить .То получится уже своя нейронка с генерацией музыки ещё там обновили эту нейросеть что она может вроде генерировать музыку до 3 минут и так же.Думаб самоя нужная функция ещё это продолжения песни с контекстом.Что бы можно делать мелодии ,песни по 6 и так далее минут.И так же вот пример генерации Sonauto ai ,не очень,но если это иметь в виду что автор нейросети разрешил использовать его композиции то в принципе пойдёт для обучения
Ну вкрации я такой поизучал нейронки stable audio (открытая) и sonauto ai (закрытая)и вот мои вердикты
Next up
Мои предсказания по поводу "Какие открытые нейросети выйдут или уже будут доступны в начале 2025 году?"
Хотите рофл? Я нашёл датасет музыки с 7000 композиций с статусом общественным достоянием .И так же я потихоньку разбераюсь с stable audio tools .и надеюсь я сегодня буду обучать свою первую музыкальную модельку
В крации там я уже без понятия то ли я ошибся в размерах датасета то ли автор что то наколдовал .Но примерно вышло файлов музыки на 5000-6000
Относительно недавно у меня появилась странная вещь, связанная с нейросетями
RIDDLE.
Если вы хотите создать свою собственную муз.нейросеть но туториалов по transformer нету?То как за основу берите stable audio tools https://github.com/Stability-AI/stable-audio-tools?tab=MIT-1-ov-… это уже готовая нейросеть с открытым исходным кодом и вы можете модифицировать для своих задач
Первая новость:Мне не удалось обучить музыкальную модель из-за ошибок в консоли и из-за того, что не удалось найти нужную версию Clap (фигня, которая описывает музыку).Вторая новость это моя теория насчёт stable audio tools
no pain no gain
Короче я почти разобрался с нейросетью по генерации музыки.Осталось понять что делать с подписями для музыки и что такое кондиционеры(это связано с нейросетями ,а не с бытовой техникой)
2 comments