HyperAIHyperAI

Command Palette

Search for a command to run...

استرجاع المستندات الطويلة عبر فهرس المحتويات

تطرح تقنيات الذكاء الاصطناعي الحديثة نهجًا جديدًا لمعالجة استرجاع المعلومات من الوثائق الطويلة ضمن أنظمة الاسترجاع المعزز بالتوليد، من خلال تقنية تُعرف بهندسة الحلقات للاسترجاع الهرمي. يهدف هذا الأسلوب إلى تجاوز محدودية الطرق التقليدية التي تعتمد على التضمين المسطح، والتي غالبًا ما تفشل في عزل الإجابة الدقيقة ضمن وثائق ضخمة تحتوي على فهرس محتويات هائل. تعتمد المنهجية الجديدة على استغلال الهيكل الداخلي للوثيقة، حيث يتم استخلاص فهرس المحتويات وتحويله إلى شجرة هرمية متعددة المستويات. بدلا من تغذية نموذج اللغة الكبير بكل الفهرس دفعة واحدة، يعمل النظام على مبدأ التوجيه التصاعدي التكراري. في كل خطوة، يعرض النظام على النموذج فقط عناوين المستوى الحالي مع نطاق الصفحات المرفقة بها. يقوم النموذج بتحليل السؤال، يختار المسار الأنسب، وبعدها يقوم النظام بفتح المسار المختار لعرض المستوى التالي من العناوين الفرعية. تتكرر هذه العملية حتى يصل الاسترجاع إلى ورقة نهائية، أو قسم محدد بحجم قابل للقراءة كاملاً، أو عند طلب قائمة شاملة تتطلب عرض المحتوى بأكمله دون تفرع. تظهر فعالية هذا النهج بوضوح عند تطبيقه على وثائق معيارية طويلة مثل الإطار الأمني NIST SP 800-53، الذي يحتوي على 492 صفحة و358 عنوانًا في فهرسه. بينما تعتمد الطرق التقليدية على تضمين جميع الصفحات ومقارنتها حرفيًا، مما يؤدي إلى تشتت النتائج وتداخلها، يتيح الاسترجاع الهرمي للنموذج قراءة 56 عنوانًا موزعة على ثلاث استدعاءات فقط للوصول إلى الإجابة الدقيقة، متجاوزًا بقية الأقسام التي لا صلة لها بالسؤال. هذا التدرج الذكي يضمن دقة عالية في استخلاص المعلومات مع استهلاك رموز أقل بشكل ملحوظ، مما يرفع الكفاءة التشغيلية ويقلل التكاليف المرتبطة بتشغيل النماذج. يتميز النظام بمرونة عالية في شروط التوقف والتكرار، حيث يعتمد على بنية الوثيقة ذاتها بدلاً من نتائج التوليد، مما يمنع التكرار اللانهائي ويقيد العمق بالتنسيق الهيكلي للوثيقة. كما يمتد هذا الإطار ليشمل مجلدات الوثائق المتعددة، حيث يُعتبر فهرس الملفات هو المستوى الأعلى، ويتبع كل ملف هيكله الهرمي الداخلي بنفس آلية التوجيه. تُعد هذه التطورات خطوة جوهرية في بناء أنظمة الاسترجاع المعزز بالتوليد المؤسسية، حيث تدمج بين الهندسة المعمارية المنطقية للوثائق وقدرات النماذج اللغوية الكبيرة لتقديم استرجاع ذكي، قابل للتوسع، وعالي الدقة في معالجة البيانات المعقدة طويلة النص.

الروابط ذات الصلة