Command Palette

Search for a command to run...

4ヶ月前

これらの鳥は類似しているか:微細な表現のための分岐ネットワーク学習

{Ignazio Gallo Nicola Landro Moreno Caraffini Alessandro Calefati Shah Nawaz}

これらの鳥は類似しているか:微細な表現のための分岐ネットワーク学習

要約

細粒度画像分類は、データセットに階層的な粗い粒度から細かい粒度への分布が存在するため、困難なタスクである。一般的に、細粒度データセットにおける異なるオブジェクトの区別には、オブジェクトの部位(part)が用いられるが、すべての部位が有用であるとは限らない。近年、自然言語による記述を用いて、オブジェクトの識別的特徴となる部位に関する情報を得るアプローチが注目されている。本論文では、自然言語記述を活用し、複数層を持つ二本のブランチから構成されるネットワークを用いて、自然言語記述と画像の共同表現を学習する戦略を提案する。これにより、細粒度画像分類の性能が著しく向上することが、広範な実験から示された。さらに、本手法はCUB-200-2011データセットにおいて、新たな最先端(state-of-the-art)の成果を達成した。

ベンチマーク

ベンチマーク方法論指標
fine-grained-image-classification-on-cub-200-1Nts-Net
Accuracy: 87.5
multimodal-deep-learning-on-cub-200-2011Two Branch Network (Text - Bert + Image - Nts-Net)
Accuracy: 96.81
multimodal-text-and-image-classification-onTwo Branch Network (Text - Bert + Image - Nts-Net)
Accuracy: 96.81

AI で AI を構築

アイデアからローンチまで — 無料の AI 共同コーディング、すぐに使える環境、最適価格の GPU で AI 開発を加速。

AI 共同コーディング
すぐに使える GPU
最適価格
今すぐ始める

Hyper Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています
これらの鳥は類似しているか:微細な表現のための分岐ネットワーク学習 | 論文 | HyperAI超神経