HyperAIHyperAI

Command Palette

Search for a command to run...

トレーニングフリー評価を用いたファイヤーフライアルゴリズムとの混合によるNeural Architecture Searchの改善

Pierre De Loor Marlène Gilles Alexis Nédélec Nassim Mokhtari

概要

ニューラルアーキテクチャ探索(Neural Architecture Search: NAS)アルゴリズムは、深層ニューラルネットワークの設計を自動化するために用いられる。特定のデータセットに対して最適なアーキテクチャを見つけるには、膨大な数のネットワークを探索し、その性能に基づいてスコアを付けて最も適切なものを選定する必要があるため、時間のかかるプロセスとなる。本研究では、未学習のモデルがデータ間をどれだけ区別できるかを評価する能力を測定するために、イントラクラスタ距離(Intra-Cluster Distance: ICD)スコアを用いた新たな指標を提案する。また、従来のファイヤーフライ(FireFly)アルゴリズムよりも局所最適解問題に対してよりロバストな改良版のファイヤーフライアルゴリズムを、特定のデータセットに適した最良のニューラルネットワークモデルを探索するための探索手法として用いる。異なるNASベンチマークにおける実験結果から、本研究で提案する指標がCNNおよびRNNの両方に対して有効であることが示されるとともに、提案するファイヤーフライアルゴリズムが、最先端の訓練不要型手法よりも優れた結果を達成できることを確認した。


AIでAIを構築

アイデアからローンチまで — 無料のAIコーディング支援、すぐに使える環境、最高のGPU価格でAI開発を加速。

AI コーディング補助
すぐに使える GPU
最適な料金体系

HyperAI Newsletters

最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています