Les emocions en la música: estudi de l’efecte de la veu, la instrumentació i la producció en el reconeixement d’emocions

Abstract

En aquest treball abordem la caracterització i classificació d'emocions expressades en la música. Ho fem dins d'un context sonològic, ja que ens preguntem si aquesta comunicació d'emocions és diferent quan escoltem diferents materials dels que s'integren dins d'una cançó (veu sola, instrumentació, veu i instrumentació) a quan escoltem la peça completament produïda. A partir de la revisió de la literatura sobre el tema, proporcionem una visió general de les característiques i problemàtiques més destacables en la classificació d’emocions expressades en la música. Per a tal fi es crea una col.lecció de fragments musicals d’estils i estímuls emocionals variats, dels quals ‘s’extreuen quatre variants diferents: veu, instrumental, veu + instrumental i mescla; cadascun d’aquests fragments són avaluats per diferents subjectes en relació a les emocions percebudes en cada fragment. Les respostes són analitzades estadísticament i s’estableixen relacions entre els fragments i les emocions, tant a nivell de la predominança d’una emoció com de la relació entre elles en cadascun dels fragments. En aquest sentit, s’ha pogut observar com, d’una banda, les emocions positives (alegria, animació) tendeixen a obtenir resultats de percepció més alts que les emocions negatives (irritació, despreci) i d’una altra banda, com els diferents elements que integren una cançó tenen un efecte rellevant en la percepció de les emocions. A continuació es realitza un anàlisi acústic i s’extreuen els descriptors i característiques musicals més rellevants de cadascun d’ells per a ser utilitzats en un models que permetin predir quines seran les emocions percebudes pels oients en altres fragments i per a les diferents condicions musicals abans esmentades. En aquest sentit, les emocions negatives han obtingut els millors valors de predicció, principalment en la condició mescla, la qual ha vist incrementada la seva efectivitat de predicció en la combinació amb els elements de les condicions veu i instrumental.

En este trabajo abordamos la caracterización y clasificación de emociones expresadas en la música. Lo hacemos des de un contexto sonológico, ya que nos preguntamos si esta comunicación de emociones es diferente cuando escuchamos diferentes materiales de los que se integran en una canción (voz sola, instrumentación, voz e instrumentación) a cuando escuchamos la pieza completamente producida. A partir de la revisión de la literatura sobre el tema, proporcionamos una visión general de las características y problemáticas más destacadas en la clasificación de emociones expresadas en la música. Para tal fin se crea una colección de fragmentos musicales de estilos y estímulos emocionales variados, de los cuáles se extraen cuatro variantes diferentes: voz, instrumental, voz + instrumental y mezcla; cada uno de estos fragmentos son evaluados por diferentes sujetos en relación a las emociones percibidas en cada fragmento. Las respuestas son analizadas estadísticamente y se establecen relaciones entre los fragmentos y las emociones, tanto a nivel de predominio de una emoción como de la relación entre ellas en cada uno de los fragmentos. En este sentido, se ha podido observar com por un lado, las emociones positivas (alegría, animación) tienden a obtener resultados de percepción más altos que las emociones negativas (irritación, desprecio), y por otro lado, como los diferentes elementos que integran una canción tienen un efecte relevante en la percepción de las emociones. A continuación se realiza un análisis acústico de cada uno de los fragmentos y se extraen los descriptores y características musicales más relevantes de cada uno de ellos para ser utilizados que permitan predecir qué emociones serán percibidas por los oyentes en otros fragmentos y para las diferentes condiciones musicales nombradas anteriormente. En este sentido, las emciones negativas han obtenido los mejores valores de predicción, principalmente en la condición mezcla, la cuál ha visto incrementada su efectividad de predicción en la combinación con los elementos de las condiciones voz instrumental.

The project deals with the characterization and the classification of the emotions expressed by music. The analysis has been done from a sonologic perspective, considering that our aim is trying to discover if these emotions are differently perceived when we listen the different part of a song separately (voice, instrumentation, voice and instrumentation together) in respect of listening the whole song produced. After reviewing the existent literature, we have focused our attention/have started the work introducing a global view on the most interesting features and issues of the categorization of the emotions expressed by music. With this aim, we have created a collection of soundtracks of different music styles able to transmit different emotional reactions/stimulus, by whom we have extracted 4 different versions: voice, instrumentation, voice + instrumentation and a mix of them; the emotions transmitted by any soundtracks have been analysed through a survey that we presented to a varied public. We have statistically examined the answers and we have established connections between any soundtrack and the emotions perceived, considering the existence of a predominant emotion and the relationships between them in any soundtrack. In this way, we have observed that positive emotions (happiness, animation) are more frequently perceived than negative (irritation, contempt); on the other hand, we have noticed that the different elements of a song have strongly impact on the emotions’ perception. Next, we have realised an acoustic analysis of any soundtrack and we have deduced the most relevant musical features of any one that allow to predict which emotions will be perceived by the listeners appreciating other soundtracks and under the different musical conditions mentioned before. In this way, negative emotions have obtained best prediction values, mainly in mix condition; furthermore, emotions perception in mix condition has increased their values in combination with voice and instrumental features.