Image Captioning On Nocaps Entire
評価指標
B1
B2
B3
B4
CIDEr
METEOR
ROUGE-L
SPICE
評価結果
このベンチマークにおける各モデルのパフォーマンス結果
比較表
モデル名 | B1 | B2 | B3 | B4 | CIDEr | METEOR | ROUGE-L | SPICE |
---|---|---|---|---|---|---|---|---|
モデル 1 | 80.77 | 65.55 | 48.14 | 30.2 | 97.61 | 30.07 | 58.25 | 14.74 |
モデル 2 | 78.75 | 59.36 | 37.56 | 19.72 | 78.48 | 25.13 | 52.54 | 11.57 |
git-a-generative-image-to-text-transformer | 88.1 | 74.81 | 57.68 | 37.35 | 123.39 | 32.5 | 63.12 | 15.94 |
モデル 4 | 79.32 | 60.95 | 39.5 | 20.3 | 79.04 | 25.44 | 53.8 | 11.9 |
lyrics-boosting-fine-grained-language-vision | - | - | - | - | 126.8 | - | - | - |
モデル 6 | 72.33 | 52.42 | 30.83 | 14.73 | 53.36 | 21.52 | 48.87 | 9.15 |
clipcap-clip-prefix-for-image-captioning | - | - | - | - | 65.83 | - | - | 10.86 |
モデル 8 | 76.64 | 56.46 | 36.37 | 19.48 | 85.34 | 28.15 | 52.83 | 14.67 |
モデル 9 | 81.03 | 64.62 | 45.26 | 26.52 | 87.56 | 27.36 | 56.7 | 12.81 |
モデル 10 | 78.92 | 61.6 | 41.52 | 23.52 | 86.0 | 26.31 | 54.75 | 12.1 |
モデル 11 | 82.95 | 67.45 | 49.58 | 31.38 | 106.81 | 30.32 | 59.18 | 14.56 |
モデル 12 | 83.25 | 67.3 | 48.41 | 29.27 | 98.08 | 28.92 | 58.56 | 13.9 |
モデル 13 | 87.01 | 73.71 | 56.88 | 37.71 | 120.55 | 32.29 | 62.52 | 15.47 |
モデル 14 | 73.42 | 52.12 | 29.35 | 12.88 | 61.48 | 22.06 | 48.74 | 9.69 |
モデル 15 | 83.9 | 68.77 | 50.84 | 32.17 | 108.29 | 30.64 | 59.82 | 14.72 |
モデル 16 | 67.85 | 47.37 | 25.76 | 11.96 | 46.18 | 19.84 | 46.61 | 8.35 |
vinvl-making-visual-representations-matter-in | 81.59 | 65.15 | 45.04 | 26.15 | 92.46 | 27.57 | 56.96 | 13.07 |
モデル 18 | 77.97 | 60.27 | 40.68 | 23.48 | 75.88 | 26.15 | 54.3 | 11.89 |
モデル 19 | 73.04 | 54.08 | 33.88 | 17.69 | 47.69 | 21.85 | 49.97 | 9.42 |
モデル 20 | 82.43 | 66.25 | 47.18 | 28.2 | 93.0 | 28.09 | 57.57 | 13.35 |
clipcap-clip-prefix-for-image-captioning | - | - | - | - | 65.7 | - | - | 11.1 |
モデル 22 | 78.58 | 59.05 | 37.39 | 19.43 | 78.23 | 25.12 | 52.35 | 11.62 |
prismer-a-vision-language-model-with-an | 84.87 | 69.99 | 52.48 | 33.66 | 110.84 | 31.13 | 60.55 | 14.91 |
vivo-surpassing-human-performance-in-novel | 85.62 | 71.36 | 53.62 | 34.65 | 114.25 | 31.27 | 61.2 | 14.85 |
モデル 25 | 71.69 | 52.04 | 31.7 | 16.73 | 55.97 | 22.53 | 49.64 | 10.1 |
モデル 26 | 72.02 | 51.97 | 31.62 | 16.48 | 48.29 | 21.87 | 49.03 | 9.56 |
simvlm-simple-visual-language-model | 83.78 | 68.86 | 51.06 | 32.2 | 110.31 | 30.55 | 59.86 | 14.49 |
モデル 28 | 72.49 | 52.88 | 33.22 | 17.75 | 61.48 | 23.89 | 50.4 | 10.96 |
モデル 29 | 74.0 | 55.11 | 35.23 | 19.16 | 54.25 | 22.96 | 50.92 | 10.14 |
モデル 30 | 78.19 | 60.74 | 39.11 | 21.24 | 82.88 | 25.72 | 53.85 | 12.2 |
モデル 31 | 69.07 | 47.65 | 25.5 | 11.72 | 39.33 | 19.61 | 46.58 | 8.2 |
モデル 32 | 76.89 | 57.76 | 36.93 | 20.11 | 75.58 | 25.18 | 52.53 | 11.68 |
モデル 33 | 74.0 | 55.11 | 35.23 | 19.16 | 54.25 | 22.96 | 50.92 | 10.14 |
モデル 34 | 79.57 | 60.83 | 38.83 | 21.02 | 80.93 | 25.33 | 54.07 | 11.29 |
モデル 35 | 79.0 | 61.95 | 42.36 | 24.62 | 87.34 | 26.29 | 55.03 | 12.01 |
モデル 36 | 69.44 | 48.95 | 28.64 | 15.02 | 45.27 | 20.77 | 47.6 | 9.13 |
モデル 37 | 81.61 | 65.1 | 46.13 | 27.32 | 93.45 | 28.46 | 57.4 | 14.06 |
モデル 38 | 76.59 | 56.74 | 35.39 | 18.41 | 73.09 | 24.42 | 51.82 | 11.2 |
モデル 39 | 72.78 | 52.52 | 31.74 | 16.31 | 49.02 | 21.72 | 49.38 | 9.54 |