HyperAIHyperAI

Command Palette

Search for a command to run...

Array de Dual Quaternion Ambisonics pour la représentation acoustique à six degrés de liberté

Eleonora Grassucci Gioia Mancini Christian Brignone Aurelio Uncini Danilo Comminiello

Résumé

Les méthodes d'audio spatial suscitent un intérêt croissant en raison de la diffusion des expériences et applications audio immersives, telles que la réalité virtuelle et la réalité augmentée. À cet effet, les signaux audio 3D sont souvent captés à l’aide de capteurs Ambisoniques disposés en réseau, chacun comprenant quatre capsules qui décomposent le champ sonore en harmoniques sphériques. Dans cet article, nous proposons une représentation par quaternion dual du champ sonore spatial capté par un réseau de deux microphones Ambisoniques d’ordre un (FOA). Les signaux audio sont encapsulés dans un quaternion dual, exploitant les propriétés de l’algèbre des quaternions pour tirer parti des corrélations entre les canaux. Cette représentation enrichie, offrant 6 degrés de liberté (6DL), permet une couverture plus précise du champ sonore, conduisant à une localisation sonore plus exacte et à une expérience audio plus immersive. Nous évaluons notre approche sur une benchmark de localisation et détection d’événements sonores (SELD). Nos résultats montrent que notre modèle SELD basé sur les quaternions duals avec blocs de convolution temporelle (DualQSELD-TCN) obtient de meilleures performances par rapport aux modèles de référence réels et quaternioniques, grâce à notre représentation améliorée du champ sonore. Le code complet est disponible à l’adresse suivante : https://github.com/ispamm/DualQSELD-TCN.


Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp
Array de Dual Quaternion Ambisonics pour la représentation acoustique à six degrés de liberté | Articles | HyperAI