NAC: تقليل التوافق الضوضائي في التوافقيات عبر الحدود الوظيفية من خلال مصحح مساعد جار

وجود تطابق ضوضائي ضمن التطابق عبر الوسائط قد أثر بشكل كبير على أداء الطرق الحالية للتطابق. في هذه الورقة، نقدّم إطارًا مرنًا يُسمى "مُصحّح الجيران المساعد" (NAC) لتقليل الضوضاء من خلال استغلال الجيران، والتي تشير إلى أهداف نصية مشابهة. يُستمد هذا الإطار من ملاحظة تفيد بأن النصوص المشابهة تميل إلى أن تتطابق مع صور مشابهة. وباستخدام القدرات الصفرية للنماذج اللغوية المُدرّبة مسبقًا (PLMs)، نحدد الجيران الأقرب عدديًا (k) لكل زوج صورة-نص إيجابي. ثم، نستفيد من المعلومات الثانوية التي توفرها هذه الجيران في كل من التحقق من العينات وإصلاحها. تُظهر التجارب الواسعة على مجموعات بيانات معيارية أن إطارنا يمكنه تعزيز الأداء بشكل ملحوظ، كما أنه أكثر مقاومة لمستويات مختلفة من التطابق الضوضائي.