TextToSample te deja experimentar con Inteligencia Artificial de última generación: De ejecución local, genera sonidos con Meta MusicGen sobre tus descripciones, y los arrastras a tu DAW…
Actualizado 10/08/2023: La esperada versión VST3 de TextToSample ya está disponible
Todo este asunto de la IA parece ya casi una pesadilla de cantinela… Y es que nos guste o no, su presencia en nuestra escena es más que palpable. Lo bueno es que hay sistemas capaces de sorprender, y si la finalidad es obtener ideas o inspiración, ¿por qué no dedicarles algunos momentos de atención?
El último desarrollo en este afluente que declara nuestras miradas, escucha y consideración es TextToSample, un sistema que hemos conocido por invitación directa de Gian-Marco de Samplab. Lo cierto es que ya habíamos hecho ecos un año atrás de otros de sus desarrollos, y este nos parece suficientemente notable para compartirlo con vosotros, porque podéis usarlo gratis, ante todo.
Invitación abierta para tu experimentación y sorpresa con TextToSample
En la innovación que nos ocupa hay una multitud de curiosos y atractivos detalles. Por un lado, es una invitación intrigante la que nos hacen: «Nuestro objetivo con TextToSample es permitir que la comunidad de productores experimente con modelos de IA generativos de última generación«, dicen sus creadores. Y su idea es que tengamos una aproximación conceptual de lo que es posible conseguir en estos momentos al usar estos modelos, «especialmente cuando los ejecutas localmente en tu ordenador«, precisan.
Hasta ahora, todo lo que hemos conocido en cuanto a Inteligencia Artificial generativa estaba basado en enormes sistemas remotos en la nube; aunque es justo destacar que TextToSample recurre al API del conocido sistema MusicGen de Meta, ya que éste fue licenciado internacionalmente bajo Creative Commons BY-NC 4.0, con atribución y sin intenciones comerciales (mira aquí la librería Audiocraft de Facebook Research).
Otro elemento destacable es que conecta con el uso responsable de la IA en los aspectos de la creatividad, del cual ya hemos conocido otras expresiones, como fue el caso del reciente desarrollo de la tecnología Deep Sampling de Audialab…
«El propósito de TextToSample ciertamente no es reemplazar a los músicos humanos, lo cual no es capaz de hacer de todos modos…», aseguran sus creadores
Cómo funciona TextToSample y qué hardware necesitas
Todos los cálculos son realizados de forma local en tu ordenador, y sólo necesitas una conexión a Internet para descargar los modelos cuando abras TextToSample por primera vez. Y en cuanto al hardware, las necesidades de computación y procesamiento pueden ser intensas, con la recomendación expresa de empleo de chips de última generación, como Intel Core i9 13900K o i7 13700K, así como Apple M1 con Neural Engine –una tarjeta gráfica o GPU moderna ayudan también.
Los pesos del modelo «small» de Meta MusicGen son la clave para la operación de TextToSample, aunque eso es algo que será transparente a tu acción (lee más detalles sobre el modelo y los datos iniciales de entrenamiento aquí); así las cosas, tus actividades quedan reducidas a que escribas «prompts» generativos, o instrucciones de texto sobre el contenido sonoro que desees conseguir –y divertirte con el proceso.
De momento, los sistemas operativos soportados por TextToSample incluyen Windows 10, macOS 12, y versiones superiores de ambos. Y al parecer, una versión como plugin VST3 para ambas plataformas debería llegar pronto. Dicho y hecho, acabamos de saber que la esperada versión VST3 de TextToSample ya está disponible en la misma descarga que enlazamos.