Command Palette
Search for a command to run...
صوت بارلو توينز: تعلم تمثيل الصوت ذاتيًا دون إشراف
صوت بارلو توينز: تعلم تمثيل الصوت ذاتيًا دون إشراف
Jonah Anton Harry Coppock Pancham Shukla Björn W. Schuller
الملخص
هدف التعلم الذاتي بدون إشراف لـ Barlow Twins لا يحتاج إلى عينات سلبية أو تحديثات تعلم غير متماثلة، مما يحقق نتائج على قدم المساواة مع أحدث ما وصل إليه العلم في مجال الرؤية الحاسوبية. بناءً على ذلك، نقدم Audio Barlow Twins، وهي طريقة جديدة للتعلم الذاتي بدون إشراف لتمثيل الصوت، حيث تم تعديل Barlow Twins لتتناسب مع مجال الصوت. نقوم بتدريب النموذج مسبقًا على مجموعة البيانات الصوتية الضخمة AudioSet، ونقيم جودة التمثيلات المُتعلَّمة من خلال 18 مهمة من تحدي HEAR 2021، مما يحقق نتائج تتفوق أو تكون على قدم المساواة مع أحدث ما وصل إليه العلم في الطرق التي تعتمد على التمييز بين النماذج للتعلم الذاتي بدون إشراف في تمثيل الصوت. الكود متاح على الرابط: https://github.com/jonahanton/SSL_audio.