HyperAIHyperAI

Command Palette

Search for a command to run...

Bewertung von Token-basierten und Passage-basierten dichten Retrieval-Modellen für die mathematische Informationsabruf

Wei Zhong Jheng-Hong Yang Yuqing Xie Jimmy Lin

Zusammenfassung

Mit dem jüngsten Erfolg dichter Retrieval-Methoden auf Basis von Bi-Encodern haben Studien diesen Ansatz auf verschiedene interessante Downstream-Retrieval-Aufgaben angewendet, wobei eine gute Effizienz und Domänenwirksamkeit erzielt wurde. Kürzlich konnten wir auch die Anwendung dichter Retrieval-Modelle in Mathematischer Informationsretrieval (MIR)-Aufgaben beobachten, jedoch bleiben die effektivsten Systeme klassische Retrieval-Methoden, die handgefertigte Strukturmerkmale berücksichtigen. In dieser Arbeit versuchen wir, das Beste aus beiden Welten zu kombinieren: eine gut definierte Struktursuchmethode für eine effektive Formelsuche und effiziente Bi-Encoder-basierte dichte Retrieval-Modelle zur Erfassung kontextueller Ähnlichkeiten. Insbesondere haben wir zwei repräsentative Bi-Encoder-Modelle für tokenbasierte und passagenbasierte dichte Retrieval-Aufgaben auf aktuellen MIR-Aufgaben evaluiert. Unsere Ergebnisse zeigen, dass Bi-Encoder-Modelle den existierenden Struktursuchmethoden hochgradig ergänzend sind und wir den Stand der Technik in MIR-Datensätzen vorantreiben können.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Bewertung von Token-basierten und Passage-basierten dichten Retrieval-Modellen für die mathematische Informationsabruf | Paper | HyperAI