HyperAIHyperAI

Command Palette

Search for a command to run...

ドキュメント分類のためのマルチモーダル・サイドチューニング

Stefano Pio Zingaro Giuseppe Lisanti Maurizio Gabbrielli

概要

本稿では、マルチモーダルドキュメント分類のためのサイドチューニングフレームワークの活用を提案する。サイドチューニングは、従来のアプローチに伴う課題を解決するために最近導入されたネットワーク適応手法である。この技術により、微調整(fine-tuning)におけるモデルの硬直性およびカタストロフィックフォーリング(catastrophic forgetting)を実際に克服することが可能となる。提案手法は、既存の深層学習アーキテクチャを活用し、ベースモデルと二つのサイドネットワークからなるタンドム構造をサイドチューニングフレームワークによって統合する。本研究では、ドキュメント分類においてテキストと画像といった異なるデータソースを扱う状況においても、サイドチューニングが効果的に適用可能であることを示す。実験結果から、従来の最先端技術と比較して、ドキュメント分類の精度の限界をさらに押し上げる効果が確認された。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています