要約
Claude 3は、新たな大規模マルチモーダルモデルファミリーであり、最も高性能な製品であるClaude 3 Opus、スキルとスピードのバランスを兼ね備えたClaude 3 Sonnet、そして最も高速かつコストが低いClaude 3 Haikuから構成されています。すべての新モデルには視覚処理能力を備えており、画像データの処理および分析が可能となっています。Claude 3ファミリーは、ベンチマーク評価において優れた性能を発揮し、推論、数学、コーディングに関する評価項目において新たな基準を設定しています。Claude 3 Opusは、GPQA[1]、MMLU[2]、MMMU[3]など多くの評価において最先端の成果を達成しています。Claude 3 Haikuは、純粋なテキスト処理タスクにおいて、Claude 2[4]と同等またはそれ以上の性能を発揮しており、SonnetおよびOpusはその大幅な上回っています。さらに、これらのモデルは英語以外の言語における自然な表現力も向上しており、グローバルなユーザー層に向けた多様性と適応性を高めています。本報告書では、核心的な能力、安全性、社会的影響、および「責任あるスケーリングポリシー」において公約した極端リスク評価に焦点を当て、詳細な評価分析を提供します。