Introductie van TextToSample, waarmee loops van tekst kunnen worden gemaakt met de AI-technologie van Samplab
Samplab heeft een plug-in "TextToSample" uitgebracht die tekstinvoer omzet in geluid.
De experimentele elementen zijn nog steeds sterk, maar er worden verrassend bruikbare geluiden gegenereerd.
En de licentie van MusicGen Model Card isCC BY-NC 4.0Dus ik denk dat commercieel gebruik NG is.
(Ik weet niet of het gegenereerde monster ook NG is)
Geluidsdemo
De officiële demovideo kost minder tijd om te genereren, maar hangt sterk af van je CPU-specificaties.
Met mijn pc Ryzen 5 5600G duurt het meer dan 6 minuut om een lus van ongeveer 1 seconden te genereren.
Dus hier zijn enkele gegenereerde loops, luister ernaar.
Sleutelwoorden zijn "drumnbass" en "EDM".
U kunt ook aan het begin een ander voorbeeld voorbereiden en het vervolg genereren.
(Verwacht niet te veel)
In de video wordt de laatste lus gegenereerd op basis van de inhoud die als eerste is afgespeeld en stel vervolgens het aantal seconden in op 8 seconden.
Het zoekwoord "dubstep" was een redelijk goed resultaat.
注意 点
In mijn omgeving "Voorbeeldlab" is ook geïnstalleerd, maar om de een of andere reden "Voorbeeldlab" begonnen.
Als eerstehulpmaatregelVoorbeeldlab"" map naar een andere locatie, "TextToSample" is succesvol gestart.
Als je in dezelfde situatie terecht komt,Voorbeeldlab" naar een andere locatie en probeer het opnieuw.
概要
Aangezien er alleen informatie is over de officiële Q&A-rangschikking, zal ik de Japanse vertaling plaatsen.
V.Heb ik geld nodig om TextToSample te gebruiken?
A.Nr.Wat is het doel van Q.TextToSample?
Het doel van A.TextToSample is om de gemeenschap van producenten in staat te stellen te experimenteren met geavanceerde generatieve AI-modellen.We willen laten zien wat er momenteel mogelijk is met deze modellen, vooral wanneer ze lokaal op uw computer worden uitgevoerd. Het doel van TextToSample is niet om menselijke muzikanten te vervangen.V.Wat is de licentie voor TextToSample?
A.TextToSample gebruikt Meta's MusicGen-modelgewichten en is gelicentieerd onder CC BY-NC 4.0.Concreet worden de gewichten van het “kleine” model gebruikt.Lees hier meer over licenties en beoogd gebruik.V. Van wat voor soort gegevens heb je geleerd?
A.TextToSample gebruikt gewichten van Meta's MusicGen-model.Lees hier meer over modellen en de gegevens waarop ze zijn getraind.V. Is een internetverbinding vereist?
A. Alle berekeningen worden lokaal op uw computer uitgevoerd.Alleen de eerste keer dat u TextToSample opent, is een internetverbinding nodig om het model te downloaden.V. Wat voor soort hardware heb ik nodig?
A. We raden de Apple M1-chip of GPU met Neural Engine ten zeerste aan.Anders duurt het lang voordat het model spraak genereert.V. Welk besturingssysteem ondersteunt u?
A. Windows: 10 of meer
Mac OS: 12 en hogerV.Is er een VST2-versie?
A. VST2-plug-ins zijn stopgezet en kunnen alleen worden gedistribueerd door ontwikkelaars die in het verleden VST2-plug-ins hebben gemaakt, dus het is helaas niet mogelijk om een VST2-licentie te verkrijgen.Als je echt een VST2-plug-in nodig hebt, raad ik aan om een VST3 naar VST2-brug te gebruiken, zoals Element van Kushview.We zijn niet gelieerd aan Kushview en kunnen niet verantwoordelijk worden gehouden voor de producten van Kushview die werken met TextToSample.
ダウンロード
Geen registratie vereist om te downloaden.
Ga naar de bovenstaande link en klik op "TextToSample downloaden" om het installatieprogramma voor uw besturingssysteem te downloaden.
Installatie
Win is VST3, dus de standaardinstallatie is prima.
ま と め
Vergeleken met graphics heb ik het gevoel dat de AI-technologie voor het genereren van geluid nog ver achterloopt.
Technologische innovatie vindt echter gestaag plaats wat betreft het reproduceren van effecten.
IK'sTONEXやMeneer Tone EmpireEen plug-in gemaakt door AI-technologie, en het is gratisNeuralAmpModelerPluginIets is het resultaat van AI-technologie.
Ik denk dat er in de niet al te verre toekomst een doorbraak zal komen in het geluidsopwekkingssysteem.
コ メ ン ト