Samenwerking tussen Arm en Stability AI Transformeert Audio Generatie op Mobiele Apparaten
De samenwerking tussen Arm en Stability AI heeft geleid tot een significante vooruitgang in de generatiemogelijkheden van audio via kunstmatige intelligentie (AI) op mobiele apparaten. Dankzij de optimalisatie van de Arm KleidiAI technologie is de omzetting van tekst naar audio nu 30 keer sneller, wat nieuwe mogelijkheden opent voor de creatie van content en digitale ervaringen zonder de noodzaak van een internetverbinding.
Audio Generatie in Seconden met Stable Audio Open
Het audio generatiemodel van Stability AI, Stable Audio Open, stelt gebruikers in staat om geluidseffecten, beltonen of zelfs muziekstukken te creëren met slechts een beschrijving. Echter, het uitvoeren van dergelijke modellen op mobiele apparaten zonder cloudconnectie was een aanzienlijke technische uitdaging. Aanvankelijk nam het genereren van een enkel geluidsfragment meer dan vier minuten in beslag, wat onpraktisch was voor de eindgebruiker. Dankzij de integratie van KleidiAI, samen met optimalisaties in XNNPack en ExecuTorch, is deze tijd teruggebracht tot slechts enkele seconden op mobiele apparaten met Arm-processoren.
Deze verbetering maakt het gebruik van generatieve AI in audio niet alleen toegankelijker, maar stelt ook miljoenen apparaten wereldwijd in staat om deze technologie te benutten zonder afhankelijk te zijn van externe servers.
Hoe Arm en Stability AI de prestaties hebben geoptimaliseerd
Om deze resultaten te behalen, heeft Stability AI nauw samengewerkt met Arm aan de reductie en optimalisatie van het AI-model voor uitvoering op mobiele CPU’s. Dit omvatte:
- Optimalisatie van de modelparameters om prestatie en kwaliteit in balans te brengen.
- Gebruik van KleidiAI, dat de uitvoering van AI op Arm-processors verbetert zonder dat aanvullende wijzigingen nodig zijn van de ontwikkelaar.
- Alle processen offline uitvoeren, wat zorgt voor meer privacy en een lager energieverbruik.
“Naarmate meer bedrijven en creators generatieve AI omarmen, is het cruciaal dat deze modellen toegankelijk zijn op elk platform. Arm is een ideale partner om dit mogelijk te maken,†aldus Prem Akkaraju, CEO van Stability AI.
Toepassingen en Voordelen van Generatieve Audio AI
Deze innovatie heeft het potentieel om sectoren zoals de volgende te transformeren:
✅ Contentcreatie – Generatie van gepersonaliseerde geluidseffecten voor video’s, sociale media en games.
✅ Mobiele video-editing – Snelle integratie van audio zonder dat clips uit het internet gedownload hoeven te worden.
✅ Entertainment en personalisatie – Creatie van beltonen of alarmen in enkele seconden.
✅ Toegankelijkheid en educatie – Productie van automatische vertellingen of verbeterde audio-assistenten.
Demonstraties op MWC 2025
Tijdens het Mobile World Congress 2025 presenteren Arm en Stability AI hun oplossing op de stand van Arm in Hal 2 Stand I60. De demonstratie omvat apparaten zoals de vivo X200 Series met de MediaTek Dimensity 9400 processor, gebaseerd op de Armv9 architectuur.
Deze samenwerking markeert slechts het begin van een nieuwe era in generatieve AI uitgevoerd op mobiele apparaten, waardoor snellere, privé en toegankelijke ervaringen mogelijk worden. Met toekomstige optimalisaties zijn Stability AI en Arm van plan deze technologie uit te breiden naar afbeeldingen, video en 3D-modellen, en zo de digitale creatie rechtstreeks vanaf smartphones te herdefiniëren.
Bron: ARM