HyperAIHyperAI

Command Palette

Search for a command to run...

MeetingBank-LLMCompressed Besprechungsprotokoll-Komprimierungstrainingsdatensatz

Datum

Organisation

Microsoft Corporation

Paper-URL

2403.12968

Lizenz

Other

MeetingBank-LLMCompressed ist ein im Jahr 2024 von Microsoft veröffentlichtes Dataset zum Aufbau von Trainingsdaten für LLMLingua-2-Kompressoren. Die zugehörige Publikation ist «LLMLingua-2: Data Distillation for Efficient and Faithful Task-Agnostic Prompt Compression» und das Dataset zielt darauf ab, effiziente und sinntreue, aufgabenunabhängige Trainingsbeispiele für Prompt-Kompression bereitzustellen.

Das Dataset umfasst 5.169 Beispiele aus dem MeetingBank-Trainingsdatensatz. Jedes Beispiel enthält den ursprünglichen Text der Meetingprotokolle sowie eine Version, die durch unabhängige, blokweise Kompression mit GPT-4 erzeugt wurde. Der Datenumfang beträgt ungefähr 246 MB.

Zusammensetzung des Datasets

Das Dataset enthält die folgenden 6 Felder:

  • idx: Der Index der Instanz.
  • prompt: Der ursprüngliche Text des Meetingprotokolls.
  • prompt_list: Eine Liste der Textblöcke des ursprünglichen Prompts.
  • compressed_prompt_list: Eine Liste der nach der unabhängigen Kompression durch GPT-4 erhaltenen Texte für jeden Block.
  • compressed_prompt: Der vollständige komprimierte Text, der durch die Verkettung aller komprimierten Blöcke entsteht.
  • summary: Die Zusammenfassung des Meetingprotokolls aus MeetingBank.

Zitation

@inproceedings{pan2024llmlingua2,
    title={LLMLingua-2: Data Distillation for Efficient and Faithful Task-Agnostic Prompt Compression},
    author={Zhuoshi Pan and Qianhui Wu and Huiqiang Jiang and Menglin Xia and Xufang Luo and Jue Zhang and Qingwei Lin and Victor Rühle and Yuqing Yang and Chin-Yew Lin and H. Vicky Zhao and Lili Qiu and Dongmei Zhang},
    year={2024},
    booktitle = {Proceedings of the 62nd Annual Meeting of the Association for Computational Linguistics},
    publisher = {Association for Computational Linguistics}
}

KI mit KI entwickeln

Von der Idee bis zum Launch – beschleunigen Sie Ihre KI-Entwicklung mit kostenlosem KI-Co-Coding, sofort einsatzbereiter Umgebung und bestem GPU-Preis.

KI-gestütztes kollaboratives Programmieren
Sofort einsatzbereite GPUs
Die besten Preise

HyperAI Newsletters

Abonnieren Sie unsere neuesten Updates
Wir werden die neuesten Updates der Woche in Ihren Posteingang liefern um neun Uhr jeden Montagmorgen
Unterstützt von MailChimp