HyperAIHyperAI

Command Palette

Search for a command to run...

Suppe Aus Kategorieexperten

Datum

vor 11 Stunden

Organisation

Meta

Paper-URL

2511.13254

Das Konzept der „Suppe von Kategorieexperten“ (SoCE) wurde im November 2025 von einem Forschungsteam von Meta und dem University College London vorgeschlagen, und die entsprechenden Forschungsergebnisse wurden in der Publikation „Souper-Modell: Wie einfache Arithmetik modernste LLM-Leistung ermöglicht".

SoCE ist eine benchmarkbasierte Methode zur Modelloptimierung, die optimale Modellkandidaten durch die Kombination von Benchmark-Aufgaben identifiziert und einen nicht-uniform gewichteten Durchschnitt verwendet, um die Gesamtleistung zu maximieren. Im Gegensatz zu traditionellen Methoden, die mit einheitlichen Gewichten arbeiten, basiert SoCE auf einer zentralen Erkenntnis: Unterschiedliche Benchmark-Kategorien weisen oft eine geringe Korrelation in der Modellleistung auf. Daher identifiziert SoCE zunächst „Expertenmodelle“ für jedes schwach korrelierte Kategoriencluster und integriert diese anschließend durch Optimierung der Gewichte anstelle einheitlicher Gewichte.

KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp