Meta випустила генератор музики за текстовим описом з відкритим кодом
MusicGen, так називається нейромережа, навчали на 20 тисячі годин музики — це 10 тисяч ліцензованих пісень, а також 390 тисяч інструментальних композицій. Вона може генерувати фрагменти як з опису, і з урахуванням звучання вже існуючих пісень.
Репозиторій доступний GitHub. Код, який використовували для навчання, буде викладено пізніше. Поки що там розміщені лише передбачені моделі, які можна запустити на процесорах з GPU на 16 ГБ пам’яті. Їх чотири штуки: з 300 млн., 1,5 млрд. і 3,3 млрд. параметрів для генерації за описом і модель з 1,5 млрд. параметрів, яка, окрім тексту, вміє враховувати ще й конкретну мелодію.
Протестувати демоверсію можна на Hugging Face.
MusicGen, так називається нейромережа, навчали на 20 тисячі годин музики — це 10 тисяч ліцензованих пісень, а також 390 тисяч інструментальних композицій. Вона може генерувати фрагменти як з опису, і з урахуванням звучання вже існуючих пісень.
Репозиторій доступний GitHub. Код, який використовували для навчання, буде викладено пізніше. Поки що там розміщені лише передбачені моделі, які можна запустити на процесорах з GPU на 16 ГБ пам’яті. Їх чотири штуки: з 300 млн., 1,5 млрд. і 3,3 млрд. параметрів для генерації за описом і модель з 1,5 млрд. параметрів, яка, окрім тексту, вміє враховувати ще й конкретну мелодію.
Протестувати демоверсію можна на Hugging Face.
