
要約
デザイナーが作成したグラフィカルユーザーインターフェースのスクリーンショットをコンピュータコードに変換することは、カスタマイズされたソフトウェア、ウェブサイト、モバイルアプリケーションの構築のために開発者が通常行うタスクです。本論文では、深層学習手法を活用して、単一の入力画像から自動的にコードを生成するモデルをエンドツーエンドで訓練し、iOS、Android、およびウェブベースの技術(web-based technologies)の3つの異なるプラットフォームに対して77%以上の精度を達成できることを示します。