HyperAIHyperAI

Command Palette

Search for a command to run...

Kontextuelle Einbettung und Modellgewichtung durch Fusion von Domänenwissen in der Biomedizinischen Fragebeantwortung

Yuxuan Lu Jingya Yan Zhongzheng Ge Zhixuan Qi Yongping Du

Zusammenfassung

Biomedizinische Fragebeantwortung (Biomedical Question Answering) strebt danach, eine Antwort auf eine gegebene Frage aus dem biomedizinischen Bereich zu erhalten. Aufgrund der hohen Anforderungen an das Wissen im biomedizinischen Bereich ist es für das Modell schwierig, dieses Wissen aus begrenzten Trainingsdaten zu lernen. Wir schlagen eine kontextuelle Einbettungsmethode vor, die ein offenes QA-Modell (\aoa) und das \biobert-Modell, das auf biomedizinischen Daten vortrainiert wurde, kombiniert. Wir verwenden unsupervisiertes Vortraining auf einem großen biomedizinischen Korpus und supervisiertes Feinjustierungstraining auf einem biomedizinischen Fragebeantwortungsdatensatz. Zudem integrieren wir eine Gewichtungsschicht basierend auf einem mehrschichtigen Perzeptron (MLP), um die Vorteile beider Modelle automatisch auszunutzen und die korrekte Antwort zu liefern. Das öffentliche Datensatz \biomrc, der aus dem PubMed-Korpus konstruiert wurde, wird verwendet, um unsere Methode zu evaluieren. Die experimentellen Ergebnisse zeigen, dass unser Modell den aktuellen Stand der Technik (state-of-the-art system) deutlich übertrifft.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp