HyperAIHyperAI

Command Palette

Search for a command to run...

エキセンプラーに基づく画像翻訳のためのクロスドメイン対応学習

Pan Zhang Bo Zhang Dong Chen Lu Yuan Fang Wen

概要

我々は、入力として異なるドメイン(例えば、セマンティックセグメンテーションマスク、エッジマップ、ポーズキーポイントなど)を持つ画像を用い、例示画像(exemplar image)に基づいて写真のようなリアルな画像を合成する汎用的なフレームワークを提案する。生成された画像は、例示画像内の意味的に対応するオブジェクトと同一のスタイル(色調、テクスチャなど)を保持する。本研究では、ドメイン間対応関係と画像翻訳の両タスクを同時に学習するアプローチを提案する。両タスクは互いに補完し合い、弱教師あり学習(weakly supervised learning)によって効果的に学習可能である。異なるドメインからの画像はまず、密な対応関係が確立可能な中間ドメインにアライメントされる。その後、ネットワークは例示画像内の意味的に対応するパッチの外観に基づいて画像を合成する。本手法の有効性を複数の画像翻訳タスクにおいて実証した。結果として、画像品質において最先端の手法を大きく上回り、例示画像のスタイルを意味論的に整合性を保った形で忠実に再現できることが明らかになった。さらに、本手法が複数の応用においても有効であることを示した。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています