Stability AI представила компактну ІІ-модель для генерації звуку без інтернету

Компанія Stability AI, відома своїми розробками в галузі генеративного ШІ, анонсувала нову модель для створення аудіо — Stable Audio Open Small. Головна особливість інструмента — можливість роботи на смартфонах без підключення до інтернету, завдяки оптимізації для процесорів Arm.

Модель, розроблена спільно з виробником чіпів Arm, орієнтована на створення коротких звукових фрагментів: семплів, ефектів або інструментальних замальовок довжиною до 11 секунд. За заявою розробників, генерація такого аудіо займає менше восьми секунд навіть на мобільних пристроях. Це стало можливим завдяки зменшенню розміру нейромережі до 341 мільйона параметрів і адаптації під енергоефективні чіпи.

На відміну від хмарних сервісів на кшталт Suno та Udio, Stable Audio Open Small функціонує локально, що вирішує проблему затримок і залежності від інтернету. Крім того, навчання моделі проводилось виключно на даних з безкоштовних бібліотек Free Music Archive та Freesound, що мінімізує ризики, пов'язані з авторськими правами. Це відрізняє її від деяких конкурентів, які використовують спірний контент для тренування ШІ.

Однак у інструмента є обмеження: він підтримує лише англійські текстові запити, не генерує вокал або складні композиції. Умови використання також варіюються: для стартапів і дослідників модель безкоштовна, але компанії з річним доходом вище $1 млн повинні придбати комерційну ліцензію. Stable Audio Open Small не претендує на заміну професійних студій, але пропонує зручне рішення для швидкого створення звукового супроводу безпосередньо на мобільних пристроях.