على الرغم من أن البحث التفاعلي قد أصبح موضوعًا رئيسيًا في كل من مجالي الأبحاث المتعلقة بالمحادثات وعلوم المعلومات (IR)، إلا أن التقدم الحقيقي قد توقف بسبب الحجم والجودة المحدودين للبيانات المتاحة. ولحل هذه العقبة الأساسية، نقدم مجموعة بيانات متعددة الوسائط ومتعددة المجالات للمحادثات (MMConv)، وهي مجموعة مُعلَّمة بالكامل من محادثات تفاعلية بين أشخاص تُمثّل أدوارًا، تغطي عدة مجالات ومهام. تتمثل المساهمة في جوانبها الثنائية. أولاً، إلى جانب المحادثات متعددة الوسائط الموجهة نحو المهام بين المستخدم والوكيل، تم تسمية المحادثات بشكل كامل بحالة المعتقدات في المحادثة وأفعال المحادثة. والأهم من ذلك، قمنا بإنشاء بيئة شاملة نسبيًا لإجراء عمليات البحث التفاعلي متعدد الوسائط في ظل ظروف مستخدم حقيقية، تشمل قاعدة بيانات منشآت منظمة، ومكتبة صور مُعلَّمة، بالإضافة إلى قاعدة بيانات معرفة مُجمَّعة من المشاركين عبر الإنترنت. كما نقدم وصفًا مفصلاً لإجراءات جمع البيانات، مع تلخيص لهيكل البيانات والتحليلات الناتجة عنها. ثانيًا، نُقدّم مجموعة من النتائج المرجعية (benchmarks) لمهام تتبع حالة المحادثة، والتوصية التفاعلية، وإنشاء الاستجابات، فضلًا عن نموذج موحد يمكنه أداء عدة مهام في آنٍ واحد. وقد اعتمدنا أحدث الأساليب المُطبقة على هذه المهام لبيان إمكانية استخدام البيانات، ونقاش القيود الحالية للأساليب الحالية، ووضع معايير مرجعية لدراسات مستقبلية.