HyperAI超神経
ホームニュース最新論文チュートリアルデータセット百科事典SOTALLMモデルGPU ランキング学会
検索
サイトについて
HyperAI超神経

Code Generation On Turbulence

評価指標

CorrSc

評価結果

このベンチマークにおける各モデルのパフォーマンス結果

モデル名
CorrSc
Paper TitleRepository
GPT-3.5-Turbo0.617Turbulence: Systematically and Automatically Testing Instruction-Tuned Large Language Models for Code
CodeLlama:13B-4bit-quantised0.327Turbulence: Systematically and Automatically Testing Instruction-Tuned Large Language Models for Code
GPT-40.848Turbulence: Systematically and Automatically Testing Instruction-Tuned Large Language Models for Code
Command0.063Turbulence: Systematically and Automatically Testing Instruction-Tuned Large Language Models for Code
CodeLlama:7B-4bit-quantised0.289Turbulence: Systematically and Automatically Testing Instruction-Tuned Large Language Models for Code
0 of 5 row(s) selected.