Las pinturas se experimentan visualmente. Argira pregunta si su estructura puede experimentarse también mediante el sonido.
El acceso al arte visual sigue siendo una barrera para personas ciegas y con baja visión (VI). Las descripciones verbales ofrecen solo acceso parcial a la estructura visual.
La sonificación — traducir datos en sonido — ofrece una alternativa que preserva propiedades estructurales.
Salida WAV → espectrograma → Ds (dimensión fractal espectral) vía box-counting sobre STFT log-escalada
Hann 1024-seg · overlap 768 · FFT 2048 · percentil 80 · escalas 4–64
Monet · Poppies → tono alto, timbre complejo (802 Hz, OSC2 activo)
Van Gogh · Starry Night → textura densa, baja frecuencia (272 Hz)
Malevich · Black Square → tono simple, silencio
R²=0.8417 · p<0.001 · Argira v3.5
| Correlación | r | N | Tipo |
|---|---|---|---|
| hue_std → Ds | 45 | Diseñada | |
| hue_std → Ds (replic.) | 74 | Replicación | |
| hue_std → Rugosidad | 30 | Emergente | |
| hue_std → Rug. (−outlier) | 29 | Emergente | |
| local_contrast → freq_hz | 74 | Estructural | |
| edge_density → effort | 74 | Estructural |
Argira captura estructura de pinturas que es matemáticamente medible y perceptualmente significativa, sin reglas perceptuales explícitas.
El efecto de supresión de Dv revela que la complejidad fractal visual contribuye a la auditiva independientemente del color — espejando hallazgos en correspondencias crossmodales.
Pipeline independiente (sawtooth bandlimitado, sin métricas fractales) confirma hue_std → rugosidad espectral emergente: r=0.687 (r=0.790 excl. Malevich). Consecuencia física de superposición armónica. Replicado en 4 tipos de onda. Control pixel-shuffle (EXP-2) confirma propiedad del histograma global.
Correlación núcleo r=0.923 (R²=0.852, permutación p<0.001, N=1000). Totalmente consistente con resultado original (r=0.887, N=45). No es artefacto de selección inicial del corpus.
Dos imágenes con hue_std=0.500 idéntico pero saturación opuesta → perfiles acústicos completamente distintos (6 vs 13 armónicos emergentes). Ondas sinusoidales puras reducen r de 0.887 a 0.44.
Matriz sistemática S=(|r|+|ρ|)/2 y δ=|ρ|−|r| entre 8 descriptores visuales y 7 dimensiones acústicas. Familia cromática (hue_std, hue_entropy_bits) → frecuencia; familia estructural (edge_density, luminance_contrast) → textura y tiempo. hue_std y hue_entropy_bits son no-redundantes. fractal_D: resultado nulo honesto (S máx ≈ 0.27). Rugosidad concentra la no-linealidad. Distinción clave: estructura impuesta por operador (S≈1.000) vs propiedades emergentes del corpus.
Argira Campo Perceptual (v11): campo continuo navegable en cualquier navegador. 74 obras en espacio 2D (variedad cromática × complejidad visual) con kernel Gaussiano (σ=0.18, k=7). Diseñado con feedback de usuario ciego (Felix).
CC BY-NC 4.0 · Zenodo
10.5281/zenodo.18865019
Datasets, código fuente, análisis estadísticos y experimentos extendidos disponibles públicamente.
[1] Ramachandran & Hubbard — Synaesthesia (2001)
[2] Iosifyan et al. — Paintings & Music (2022)
[3] Spence — Crossmodal correspondences (2011)
[7] Taylor et al. — Fractal analysis of Pollock (1999)