HyperAI
Command Palette
Search for a command to run...
llama.cpp+Open-Webui デプロイ gpt-oss-120b
1. チュートリアルの概要
gpt-oss-120bは、OpenAIが2025年8月にリリースしたオープンソースの推論モデルです。強力な推論、エージェントベースのタスク、そして多様な開発シナリオを対象としています。MoEアーキテクチャをベースとするこのモデルは、128kのコンテキスト長をサポートし、クローズドソースのo4-miniおよびo3-miniに匹敵するパフォーマンスを提供します。ツール呼び出し、少数ショットの関数呼び出し、連鎖推論、健康に関する質問応答において優れた性能を発揮します。
このチュートリアルでは、デュアルカード RTX A6000 リソースを使用します。
2. プロジェクト例
3. 操作手順
1. コンテナを起動した後、API アドレスをクリックして Web インターフェイスに入ります
2. Web ページに入ると、モデルと会話を開始できます。
「モデル」が表示されない場合は、モデルが初期化中です。モデルのサイズが大きいため、2～3分ほどお待ちいただき、ページを更新してください。
利用手順
このノートブックはコミュニティユーザーによって提供されたものであり、教育および情報提供のみを目的としています。コンテンツに著作権侵害が含まれる場合は、[email protected]までご連絡ください。速やかに確認し、削除いたします。
Notebook の概要
レベル
入門
HyperAI Newsletters
最新情報を購読する
北京時間 毎週月曜日の午前9時 に、その週の最新情報をメールでお届けします
メール配信サービスは MailChimp によって提供されています