Génération de code
La génération de code est un domaine crucial qui utilise des sources de données multimodales (telles que du code incomplet, des programmes dans d'autres langages de programmation, des descriptions en langage naturel ou des exemples d'exécution) pour prédire des structures de code ou de programme explicites. Cette technologie vise à faciliter le développement d'outils de programmation automatique, à améliorer l'efficacité et la productivité de la programmation, et offre de nombreuses perspectives d'application.
MBPP
HumanEval
AgentCoder (GPT-4)
APPS
AlphaCode 1B
CoNaLa
MarianCG
Django
MarianCG
WikiSQL
NL2SQL-RULE
RES-Q
QurrentOS-coder + Claude 3.5 Sonnet
PECC
Claude 3 Haiku
WebApp1K-React
o1-preview
CodeContests
MapCoder (GPT-4)
CoNaLa-Ext
BART W/ Mined
WebApp1k-Duo-React
DSEval-LeetCode
Turbulence
GPT-4
Shellcode_IA32
CodeBERT
TACO-Code
GPT-4
BigCodeBench-Complete
BigCodeBench-Instruct
GPT-4o-2024-05-13
CodeXGLUE - CodeSearchNet
Redcoder-ext
CONCODE
Livecodebench
LPW (GPT-4o)
Verified Smart Contract Code Comments
Android Repos
Entity Type Model
FloCo
FloCo-T5
VerilogEval
Nexus (Claude 3.5 Sonnet)
Multi-Source Python Code Corpus