HyperAIHyperAI

Command Palette

Search for a command to run...

Gemeinsames Lernen von vortrainierten und zufälligen Einheiten für die Domänenanpassung bei der Wortartenzuordnung

Sara Meftah; Youssef Tamaazousti; Nasredine Semmar; Hassane Essafi; Fatiha Sadat

Zusammenfassung

Das Feinjustieren von neuronalen Netzen wird häufig verwendet, um wertvolles Wissen von domänenreichen zu domänenarmen Bereichen zu übertragen. Bei einem standardmäßigen Feinjustierungsverfahren werden Quell- und Zielprobleme mit der gleichen Architektur trainiert. Obwohl in der Lage, sich an neue Domains anzupassen, haben vortrainierte Einheiten Schwierigkeiten, ungewöhnliche zieldomänenspezifische Muster zu lernen. In dieser Arbeit schlagen wir vor, das Zielnetzwerk mit normalisierten, gewichteten und zufällig initialisierten Einheiten zu erweitern, die eine bessere Anpassung ermöglichen, während sie das wertvolle Quellwissen beibehalten. Unsere Experimente zur Part-of-Speech-Tagging von Social-Media-Texten (Twitter-Domäne) zeigen, dass unsere Methode auf drei gängigen Datensätzen den aktuellen Stand der Technik erreicht.


KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp
Gemeinsames Lernen von vortrainierten und zufälligen Einheiten für die Domänenanpassung bei der Wortartenzuordnung | Paper | HyperAI