MT
Proyectos

10 Multimedia / IA

Music Lab

Estación integral de producción musical, reproductor inmersivo HD con iluminación acústica a 60 FPS, sincronización de karaoke por IA (Whisper + Demucs) y generador de videos reactivos para redes sociales.

Captura de Music Lab

Music Lab es una plataforma web full-stack que combina un reproductor musical de estética Glassmorphism reactivo con herramientas avanzadas de inteligencia artificial para separación de pistas, sincronización fonética milimétrica y renderizado de videos dinámicos para redes sociales.

Reproductor inmersivo y motor visual HD

  • Iluminación acústica volumétrica en tiempo real (Web Audio API + Canvas 2D) con análisis FFT a 60 FPS
  • Adaptación cromática automática extrayendo la paleta tonal de la carátula de cada canción
  • Soundcheck, calibración de ganancia y recorte no destructivo de fragmentos musicales con fundidos automáticos

Pipeline de Inteligencia Artificial y Karaoke

  • Aislamiento vocal mediante redes neuronales convolucionales profundas con Demucs v4 (htdemucs)
  • Detección de actividad de voz (VAD) con Auditok para descartar silencios
  • Alineación temporal forzada (Forced Alignment) palabra por palabra con Whisper Timestamped
  • Modo Karaoke en vivo con pantalla dividida y resaltado dinámico de letras

Video Studio dinámico para redes

  • Exportación vertical en alta definición (1080x1920 MP4) para TikTok, Reels y Shorts
  • Múltiples estilos visuales: Reproductor Glassmorphism y Modo Terminal Cyberpunk con arte ASCII
  • Sincronización lírica precisa con tipografía y transiciones reactivas al tempo

Stack tecnológico

  • Frontend: Vanilla JavaScript (ES Modules), HTML5 Semántico, Web Audio API, Canvas 2D
  • Backend: Python 3.14+, FastAPI, Starlette, Uvicorn, Pydantic v2
  • Modelos IA: OpenAI Whisper, Whisper-Timestamped, PyTorch, Torchaudio
  • Procesamiento & Video: Demucs v4, Auditok, SciPy, NumPy, MoviePy, Pillow, FFmpeg, yt-dlp