HyperAIHyperAI
منذ 2 أشهر

صوت بارلو توينز: تعلم تمثيل الصوت ذاتيًا دون إشراف

Anton, Jonah ; Coppock, Harry ; Shukla, Pancham ; Schuller, Bjorn W.
صوت بارلو توينز: تعلم تمثيل الصوت ذاتيًا دون إشراف
الملخص

هدف التعلم الذاتي بدون إشراف لـ Barlow Twins لا يحتاج إلى عينات سلبية أو تحديثات تعلم غير متماثلة، مما يحقق نتائج على قدم المساواة مع أحدث ما وصل إليه العلم في مجال الرؤية الحاسوبية. بناءً على ذلك، نقدم Audio Barlow Twins، وهي طريقة جديدة للتعلم الذاتي بدون إشراف لتمثيل الصوت، حيث تم تعديل Barlow Twins لتتناسب مع مجال الصوت. نقوم بتدريب النموذج مسبقًا على مجموعة البيانات الصوتية الضخمة AudioSet، ونقيم جودة التمثيلات المُتعلَّمة من خلال 18 مهمة من تحدي HEAR 2021، مما يحقق نتائج تتفوق أو تكون على قدم المساواة مع أحدث ما وصل إليه العلم في الطرق التي تعتمد على التمييز بين النماذج للتعلم الذاتي بدون إشراف في تمثيل الصوت. الكود متاح على الرابط: https://github.com/jonahanton/SSL_audio.

صوت بارلو توينز: تعلم تمثيل الصوت ذاتيًا دون إشراف | أحدث الأوراق البحثية | HyperAI