Code Generation
قائمة المعايير القياسية
جميع المعايير القياسية المتعلقة بهذه المهمة
android-repos
أفضل نموذج: Entity Type Model
المقاييس
عرض التفاصيل
apps
أفضل نموذج: MapCoder APPS-150-cherrypicked (GPT-4)
المقاييس
عرض التفاصيل
bigcodebench-instruct
أفضل نموذج: GPT-4o-2024-05-13
المقاييس
عرض التفاصيل
codecontests
أفضل نموذج: MapCoder (GPT-4)
المقاييس
عرض التفاصيل
codexglue-codesearchnet
أفضل نموذج: Redcoder-ext
المقاييس
عرض التفاصيل
conala
أفضل نموذج: MarianCG
المقاييس
عرض التفاصيل
conala-ext
أفضل نموذج: BART W/ Mined
المقاييس
عرض التفاصيل
django
أفضل نموذج: MarianCG
المقاييس
عرض التفاصيل
floco
أفضل نموذج: FloCo-T5
المقاييس
عرض التفاصيل
humaneval
أفضل نموذج: AgentCoder (GPT-4)
المقاييس
عرض التفاصيل
livecodebench
أفضل نموذج: LPW (GPT-4o)
المقاييس
عرض التفاصيل
pecc
أفضل نموذج: Claude 3 Haiku
المقاييس
عرض التفاصيل
res-q
أفضل نموذج: QurrentOS-coder + Claude 3.5 Sonnet
المقاييس
عرض التفاصيل
shellcode-ia32
أفضل نموذج: CodeBERT
المقاييس
عرض التفاصيل
taco-topics-in-algorithmic-code-generation
أفضل نموذج: GPT-4
المقاييس
عرض التفاصيل
turbulence
أفضل نموذج: GPT-4
المقاييس
عرض التفاصيل
verilogeval
أفضل نموذج: Nexus (Claude 3.5 Sonnet)
المقاييس
عرض التفاصيل
webapp1k-react
أفضل نموذج: o1-preview
المقاييس
عرض التفاصيل
wikisql
أفضل نموذج: NL2SQL-RULE
المقاييس
عرض التفاصيل
bigcodebench-complete
المقاييس
عرض التفاصيل
concode
المقاييس
عرض التفاصيل
dseval-leetcode
المقاييس
عرض التفاصيل
mbpp
المقاييس
عرض التفاصيل
multi-source-python-code-corpus
المقاييس
عرض التفاصيل
verified-smart-contract-code-comments
المقاييس
عرض التفاصيل
webapp1k-duo-react
المقاييس
عرض التفاصيل