English version: README.md

Sobre el proyecto

• DEMO interactiva: Experimental session with sounds from the cloud (youtube link)
• Instrumento embebido corriendo en raspberry pi: raspicultor.
• Mención como “Instrumento basado en sonidos de la Nube” en el premio ArCiTec categoría Tecnología aplicada al Arte (2018).
• Publicación en Audio Mostly: Sound recycling from public databases (2017)
• “Forgotten pieces from unknown people” and “Dialectic in suspense” constructed using APICultor, were showed in NIPS 2017 Art Gallery (Machine Learning for Creativity and Design, Long Beach, California, USA)
• El trabajo “Sound recycling from public databases” fue presentado Technarte Los Angeles 2017.
• Sonidos reciclados en RedPanal.org: Sound miniatures

Licencia

Software Libre, compartido con GPL v3 (LICENSE).

¿Qué es?

ApiCultor fue implementado para realizar performances multidisciplinarias basadas en los sonidos de la plataforma http://redpanal.org pero sirve para trabajar con cualquier otra base de datos sonora en internet o disponible localmente.

El código da soporte para el procesamiento de sonidos de la web utilizando técnicas de MIR (Music Information Retrieval) para la “extracción” de parámetros que los caractericen para luego clasficarlos, segmentarlos y manipularlos según los criterios elegidos.

Funciona a través de una API REST para la consulta externa de archivos y descriptores desde SuperCollider, pyo, pd o cualquier otro tipo de entorno que maneje protocolos estándar.

Extrae miel de RedPanal con técnicas de Music Information Retrieval (MIR).

Diseño de Controlador MIDI Custom

Yaeltex custom MIDI controllers

Con un sintetizador en SuperCollider corriendo en una Raspberry pi + placa de sonido externa.

Open Stage Control User Interface version

UI MIR mode

UI Synth mode

API

Documentación sobre la API

Sonidos Mutantes

Sonidos Mutantes, propone performances basadas en el uso artístico de bases de datos preexistentes, las mismas construidas por audios o músicas libres, por ejemplo aquellas de la plataforma colaborativa de RedPanal.org, la cuál es de acceso público vía internet. Estos sonidos, analizados y procesados en tiempo real se combinan en una improvisación colectiva con músicos en vivo bajo consignas preestablecidas, dando lugar a composiciones que mutan a lo largo del tiempo y en función de los propios músicos y de la comunidad toda. Ya que el público podrá participar de la performance subiendo audios y haciendo búsquedas o comentarios en la plataforma web de RedPanal.

Pruebas de concepto:

• Performances en vivo utilizando estas herramientas:
  • APICultor + No Input + Granular synthesis performance.
  • Jam con guitarras + fx chain y sintes analógicos: Perfo mutante en La Siesta del Fauno
  • Cierre de Taller de Experimentación Sonora: http://redpanal.org/a/banda-de-mutantes-cierre-taller/
  • La Noche de los Museos La Casa del Bicentenario 29/10/2016 http://redpanal.org/a/performance-casa-tomada/ https://www.youtube.com/watch?v=eKcvkgtJIEo Con visuales 3D (Blender + game engine) Reseña: http://blog.enjambrelab.com.ar/enjambrebit-y-la-banda-de-mutantes/
• Música generativa con máquina de estados MIR y sonidos libres de Freesound.org:
  • “Feature Thinking” (con sonidos libres Creative Commons de Freesound.org)
  • State Machine @ CASo (Centro de Arte Sonoro) https://www.youtube.com/watch?v=sG1YUc8PQV4
• Remixes que toman audios libres de RedPanal.org para categorizarlos según diferentes tipos de emociones. Luego se elige una y se sincronizan las pistas, cambiando las tonalidades. De ser posible se separan de fuentes dentro de las mismas (by Mars Crop)
  • Beats intro jazz
  • [Bass & DJ] (http://redpanal.org/a/sm-bass-guitar-plays-with-dj/)
• Demos viejas:
  • Integración con controlador MIDI + Supercollider + ApicultorWebService: https://www.youtube.com/watch?v=X0M_gTOZnNQ

Componentes

• Mock web service que por medio de una API REST provee samples según criterios definidos por valores de descriptores MIR
• Máquina de estados según descriptores MIR
• Interacción con sonidos de http://redpanal.org
• API REST para realizar consultas sobre redpanal (url audios+valores de descriptores)
• Webscrapping por tag
• Algoritmos MIR para extraer descriptores promedio o por frames de pistas o samples
• Algoritmos para segmentar los archivos de audio con diferentes criterios
• Algoritmos para clasificar y agrupar los archivos de la base de datos de http://redpanal.org (clustering)
• Server OSC
• Ejemplos de uso con Supercollider, pyo
• Ejemplos con controladores MIDI y OSC. Locales y remotos.

Ver la descripción de archivos para más detalles.

Dependencias

Tested under Linux, Mac OS (>10.11) and Windows 10.

Debian, Ubuntu 15.04 and 16.04 (and .10). And Docker images. Raspian @ Raspberry Pi

Ver INSTALL.md.

Uso

Leer Instrucciones de uso.