Sonoteca V2: recuperación semántica para archivos sonoros institucionales

Arquitectura web desarrollada para la Universidad de las Artes (UArtes) que conecta descripciones en lenguaje natural con colecciones de audio mediante embeddings multilingües y búsqueda vectorial.

El desafío

Más allá de la búsqueda por nombre de archivo o etiqueta rígida

Las bibliotecas sonoras universitarias y los archivos de postproducción suelen depender de nombres de archivo crípticos o taxonomías manuales inconsistentes. Quienes buscan un ambiente, una textura foley o una sonoridad regional rara vez conocen el código exacto del clip.

Sonoteca V2 aborda esta brecha permitiendo consultas descriptivas en lenguaje natural —por intención narrativa, espacio acústico o cualidad tímbrica— sobre colecciones preservadas institucionalmente.

FastAPIBackend web en Python
1024-dimEmbeddings multilingual-e5-large
QdrantMotor de similitud vectorial
UArtesPreservación sonora institucional
Arquitectura técnica

Flujo de recuperación semántica de audio

La plataforma combina procesamiento de lenguaje natural y almacenamiento vectorial para ordenar activos sonoros según su cercanía semántica con la consulta del estudiante, docente o diseñador sonoro.

01 · ConsultaDescripción en lenguaje natural (ES / EN)
02 · Vectorizaciónsentence-transformers + multilingual-e5-large
03 · IndexaciónBúsqueda coseno / vectorial en Qdrant
04 · RecuperaciónResultados ordenados listos para auditoría
Python / FastAPIsentence-transformersmultilingual-e5-largeQdrantBúsqueda semánticaHuman–Computer Interaction
Contexto universitario

Docencia e investigación UArtes

  • Diseñada para estudiantes, docentes e investigadores de Producción Musical y Sonora en la Universidad de las Artes (Guayaquil).
  • Convierte archivos de campo y colecciones académicas en materiales consultables para proyectos audiovisuales y artísticos.
  • Integrada con asignaturas de diseño sonoro, mezcla cinematográfica y tecnologías creativas.
Práctica profesional

Uso real en postproducción

  • Reduce la fricción entre la intuición narrativa del editor o diseñador sonoro y la recuperación técnica del material.
  • Permite formular consultas multilingües en español o inglés gracias al espacio vectorial compartido de multilingual-e5-large.
  • Complementa el criterio humano en montaje de sonido sin sustituir la escucha crítica.
Ecosistema investigador

Doctorado UPV y herramientas abiertas

  • Articulada con el programa de Doctorado en Arte: Producción e Investigación de la Universitat Politècnica de València (UPV).
  • Complementa el artículo en Fuera de Campo (Vol. 8, N.° 2) sobre IA aplicada a sincronización en documentales y el desarrollo de AlineaFase.

Investigación y archivos sonoros

Conversemos sobre Sonoteca V2

[email protected]