Mind Melodies: An NLP platform to examine music cognition
García, A. M., Sosa Welford, A., Ponferrada, J., Ferrante, F., Avendaño, C., Pérez, G., Briba, A., Caro, I., Saavedra, J. F., Escobar Grisales, D. & Mesz, B. (2026). Mind Melodies: An NLP platform to examine music cognition. Behavior Research Methods 58, 198.
La música es un sistema semiótico fundamental que da forma a nuestra experiencia cotidiana al evocar pensamientos y emociones. En todos los géneros, un factor clave de estos efectos es el modo musical (la variación de escala empleada en una pieza o pasaje determinado). Para ofrecer información cuantitativa y ecológicamente válida sobre estos fenómenos, desarrollamos Mind Melodies, una plataforma interactiva que combina arte, ciencia y tecnología para revelar los efectos individuales y colectivos que desencadena cada modo griego (jónico, dórico, frigio, lidio, mixolidio, eólico y locrio). En este artículo nos proponemos (i) describir la justificación del proyecto; (ii) esbozar las interfaces de la plataforma para la recopilación de datos, la extracción de características y la visualización; y (iii) presentar los resultados preliminares de un estudio piloto. En «Mind Melodies», los participantes escuchan composiciones musicales altamente controladas en diferentes modos y escriben las escenas mentales que estas les evocan. Se utilizan algoritmos de procesamiento del lenguaje natural y de aprendizaje profundo para identificar y visualizar los principales conceptos, emociones e imágenes evocadas por cada modo. Las métricas resultantes se someten a un análisis estadístico para identificar patrones individuales y colectivos. En un estudio piloto con 142 participantes, descubrimos que cada modo se asociaba claramente con un campo semántico distinto y con emociones parcialmente diferentes (por ejemplo, el jónico se relacionaba con «vida» y «alegría»; el frigio, con «soledad», «tristeza» y «miedo»; el modo lidio, con «naturaleza» y «alegría»; y el modo eólico, con «misterio» y «tristeza»). Además, ciertos modos específicos (por ejemplo, el dórico y el mixolidio, o el frigio y el locrio) mostraron una mayor similitud entre sí que otros. En general, Mind Melodies representa un marco transdisciplinario escalable para respaldar iniciativas con enfoque científico en el campo de la cognición musical.
Para acceder al artículo, hacé click aquí.
Mind Melodies: An NLP platform to examine music cognition
García, A. M., Sosa Welford, A., Ponferrada, J., Ferrante, F., Avendaño, C., Pérez, G., Briba, A., Caro, I., Saavedra, J. F., Escobar Grisales, D. & Mesz, B. (2026). Mind Melodies: An NLP platform to examine music cognition. Behavior Research Methods 58, 198.
Music is a fundamental semiotic system that shapes our daily experience by evoking thoughts and emotions. Across genres, a key driver of these effects is musical mode (the scale variation employed in a given piece or passage). To provide quantitative, ecologically valid insights on these phenomena, we developed Mind Melodies, an interactive platform that combines art, science, and technology to reveal individual and collective effects triggered by each Greek mode (Ionian, Dorian, Phrygian, Lydian, Mixolydian, Aeolian, and Locrian). Here we aim to (i) describe the project’s rationale; (ii) outline the platform’s interfaces for data collection, feature extraction, and visualization; and (iii) report preliminary findings from a pilot study. In Mind Melodies, participants listen to highly controlled musical compositions in different modes and to type out the mental scenes thus elicited. Natural language processing and deep learning algorithms are used to identify and visualize the main concepts, emotions, and imagery elicited by each mode. The resulting metrics are subjected to statistical analysis to capture individual and collective patterns. In a pilot study with 142 participants, we found that each mode was distinctly associated with a different semantic field and partly dissimilar emotions (e.g., Ionian was linked to ‘life’ and ‘joy’; Phrygian to ‘solitude’, ‘sadness’, and ‘fear’; Lydian to ‘nature’ and ‘joy’; and Aeolian to ‘mystery’ and ‘sadness’). Also, specific modes (e.g., Dorian and Mixolydian, Phrygian and Locrian) presented greater similarity than others. Overall, Mind Melodies represents a scalable transdisciplinary framework to inform science-first initiatives in the field of music cognition.
