Le prototype consiste en un algorithme audio-tactile qui convertit la musique monophonique en stimuli tangibles basés sur des vibrations utilisant des « illusions tactiles ».
Un algorithme audio-tactile créé par des scientifiques de l’Université de Malaga transmet des informations mélodiques par vibration.
Un prototype révolutionnaire mis au point par des experts du département d’électronique du Université de Malaga et les membres du groupe de R&D « Électronique pour l’instrumentation et les systèmes » permettront aux personnes malentendantes d’écouter de la musique grâce au toucher.
Il consiste en un algorithme audio-tactile qui transforme la musique monophonique en stimuli tangibles basés sur des vibrations utilisant des « illusions tactiles ». Selon les chercheurs, “c’est comme “pirater” le système nerveux pour recevoir une réponse différente au stimulus réel envoyé.”
“Ce que nous voulons réaliser à long terme, c’est que les personnes qui n’entendent pas puissent ‘écouter’ de la musique”, assure le chercheur Paul Remache, auteur principal de cet article, qui insiste sur le pouvoir de la musique d’influencer l’humeur. , ainsi que ses possibilités en tant que thérapie des troubles mentaux et traitement de la douleur.
Les chercheurs prédisent que cela débouchera sur un terminal portable qui pourra être amené à un concert puisque ce prototype sera facilement transférable sur des appareils technologiques comme les smartphones.
Des chercheurs du département d’électronique ont mis au point un algorithme audio-tactile qui transmet des informations mélodiques par vibration. Crédit : Université de Malaga
Cartographier la musique
Ce jeune chercheur, en collaboration avec les professeurs Andrés Trujillo et Fernando Vidal de l’UMA, a développé un algorithme capable de transformer des caractéristiques et des structures musicales extraites de fichiers MIDI – Musical Instrument Digital Interface – en “stimuli vibrotactiles”.
Les premières expériences ont prouvé que les « illusions tactiles » perçues par les vibrations provoquent chez les personnes qui n’entendent pas une réponse émotionnelle différente – majoritairement positive – de celle de la musique originale. Crédit : Université de Malaga
« C’est quelque chose qui ressemble à de la cartographie musicale », explique Remache, qui ajoute que c’est possible parce que ce type de fichier peut non seulement être joué et générer du son, mais aussi fournir des « représentations symboliques ».
Contrôle des vibrations
Les modèles actuels ne garantissent pas la correspondance entre la réponse émotionnelle à la musique et sa version vibrotactile. Dans cette perspective, ces ingénieurs de l’UMA proposent un agencement des « illusions tactiles » afin d’améliorer et d’étendre le spectre des caractéristiques musicales, ajoutant une dynamique à la vibration sous forme de mouvement, de changement de direction et de localisation.
“C’est un processus difficile car la gamme de fréquences perceptibles de la peau est inférieure à celle du système auditif, ce qui peut entraîner la perte de certaines caractéristiques musicales”, expliquent-ils.
Les personnes malentendantes pourront écouter de la musique à travers le sens du toucher grâce à un prototype innovant conçu par des chercheurs du département d’électronique de l’université de Malaga. Crédit : Université de Malaga
Réponse émotionnelle différente
Les résultats des premières expériences, auxquelles ont participé plus d’une cinquantaine de volontaires, indiquent que la disposition des « illusions tactiles » suscite plus d’émotions positives que négatives. Ils sont également perçus comme plus agréables et stimulants que l’audio, provoquant une réponse émotionnelle différente de celle de la musique originale.
Instrumentation et application intelligentes dans le domaine de la santé
Ce premier prototype a été présenté au 11th International Workshop on Haptic & Audio Interaction Design (Royaume-Uni) – le plus grand événement international spécialisé dans ces domaines d’étude – après avoir été publié dans la revue scientifique LNCS. Actuellement, les chercheurs de l’UMA travaillent sur un second modèle et poursuivent les expérimentations.
La recherche est issue de la thèse de doctorat de Paul Remache et s’inscrit dans le cadre du projet du Plan National “Instrumentations intelligentes et application en santé”.
Référence : “Mappage de pistes MIDI monophoniques sur des stimuli vibrotactiles à l’aide d’illusions tactiles” par Byron Remache-Vinueza, Andrés Trujillo-León, Maria-Alena Clim, Fabián Sarmiento-Ortiz, Liliana Topon-Visarrea, Alexander Refsum Jensenius et Fernando Vidal-Verdú, 18 août 2022, Notes de cours en informatique.
DOI : 10.1007/978-3-031-15019-7_11
Le prototype consiste en un algorithme audio-tactile qui convertit la musique monophonique en stimuli tangibles basés sur des vibrations utilisant des « illusions tactiles ».
Un algorithme audio-tactile créé par des scientifiques de l’Université de Malaga transmet des informations mélodiques par vibration.
Un prototype révolutionnaire mis au point par des experts du département d’électronique du Université de Malaga et les membres du groupe de R&D « Électronique pour l’instrumentation et les systèmes » permettront aux personnes malentendantes d’écouter de la musique grâce au toucher.
Il consiste en un algorithme audio-tactile qui transforme la musique monophonique en stimuli tangibles basés sur des vibrations utilisant des « illusions tactiles ». Selon les chercheurs, “c’est comme “pirater” le système nerveux pour recevoir une réponse différente au stimulus réel envoyé.”
“Ce que nous voulons réaliser à long terme, c’est que les personnes qui n’entendent pas puissent ‘écouter’ de la musique”, assure le chercheur Paul Remache, auteur principal de cet article, qui insiste sur le pouvoir de la musique d’influencer l’humeur. , ainsi que ses possibilités en tant que thérapie des troubles mentaux et traitement de la douleur.
Les chercheurs prédisent que cela débouchera sur un terminal portable qui pourra être amené à un concert puisque ce prototype sera facilement transférable sur des appareils technologiques comme les smartphones.
Des chercheurs du département d’électronique ont mis au point un algorithme audio-tactile qui transmet des informations mélodiques par vibration. Crédit : Université de Malaga
Cartographier la musique
Ce jeune chercheur, en collaboration avec les professeurs Andrés Trujillo et Fernando Vidal de l’UMA, a développé un algorithme capable de transformer des caractéristiques et des structures musicales extraites de fichiers MIDI – Musical Instrument Digital Interface – en “stimuli vibrotactiles”.
Les premières expériences ont prouvé que les « illusions tactiles » perçues par les vibrations provoquent chez les personnes qui n’entendent pas une réponse émotionnelle différente – majoritairement positive – de celle de la musique originale. Crédit : Université de Malaga
« C’est quelque chose qui ressemble à de la cartographie musicale », explique Remache, qui ajoute que c’est possible parce que ce type de fichier peut non seulement être joué et générer du son, mais aussi fournir des « représentations symboliques ».
Contrôle des vibrations
Les modèles actuels ne garantissent pas la correspondance entre la réponse émotionnelle à la musique et sa version vibrotactile. Dans cette perspective, ces ingénieurs de l’UMA proposent un agencement des « illusions tactiles » afin d’améliorer et d’étendre le spectre des caractéristiques musicales, ajoutant une dynamique à la vibration sous forme de mouvement, de changement de direction et de localisation.
“C’est un processus difficile car la gamme de fréquences perceptibles de la peau est inférieure à celle du système auditif, ce qui peut entraîner la perte de certaines caractéristiques musicales”, expliquent-ils.
Les personnes malentendantes pourront écouter de la musique à travers le sens du toucher grâce à un prototype innovant conçu par des chercheurs du département d’électronique de l’université de Malaga. Crédit : Université de Malaga
Réponse émotionnelle différente
Les résultats des premières expériences, auxquelles ont participé plus d’une cinquantaine de volontaires, indiquent que la disposition des « illusions tactiles » suscite plus d’émotions positives que négatives. Ils sont également perçus comme plus agréables et stimulants que l’audio, provoquant une réponse émotionnelle différente de celle de la musique originale.
Instrumentation et application intelligentes dans le domaine de la santé
Ce premier prototype a été présenté au 11th International Workshop on Haptic & Audio Interaction Design (Royaume-Uni) – le plus grand événement international spécialisé dans ces domaines d’étude – après avoir été publié dans la revue scientifique LNCS. Actuellement, les chercheurs de l’UMA travaillent sur un second modèle et poursuivent les expérimentations.
La recherche est issue de la thèse de doctorat de Paul Remache et s’inscrit dans le cadre du projet du Plan National “Instrumentations intelligentes et application en santé”.
Référence : “Mappage de pistes MIDI monophoniques sur des stimuli vibrotactiles à l’aide d’illusions tactiles” par Byron Remache-Vinueza, Andrés Trujillo-León, Maria-Alena Clim, Fabián Sarmiento-Ortiz, Liliana Topon-Visarrea, Alexander Refsum Jensenius et Fernando Vidal-Verdú, 18 août 2022, Notes de cours en informatique.
DOI : 10.1007/978-3-031-15019-7_11
— to news.google.com
