HyperAIHyperAI

Command Palette

Search for a command to run...

Déployer Llama3-8B-Instruct Avec Ollama Et Open WebUI

Date

il y a 2 ans

Taille

1.07 GB

Balises

Introduction au tutoriel

Ce tutoriel est un package d'exécution en un clic d'Ollama + Open WebUI.Suivez simplement les étapes ci-dessous et entrez la commande pour exécuter le grand modèle Llama3 8B-Instruct en un clic.

Llama 3 8B-Instruct Le dernier né de la série Llama de modèles d'IA génératifs open source, Llama 3 est une amélioration significative par rapport à Llama 2 et à d'autres modèles disponibles publiquement :

  • Formé sur un ensemble de données sept fois plus grand que Llama 2 ;
  • Prise en charge de texte long de 8 K ;
  • Avec un vocabulaire de 128 000 jetons, il peut encoder la langue plus efficacement.

Le modèle a été placé dans un espace public et n'occupe aucun espace de stockage personnel.

Après avoir démarré Ollama et Open WebUI respectivement selon le contenu suivant, vous pouvez l'utiliser en utilisant « l'adresse API » sur la droite.

Comment courir

Créez un nouveau terminal et démarrez Ollama

OLLAMA_MODELS=/openbayes/home/ollama-models ./ollama serve

Créez un nouveau terminal et démarrez Open Webui

bash /openbayes/input/input1/open-webui/backend/start.sh

Ouvrir la page

  1. Copiez l'adresse API à droite et collez-la dans votre navigateur pour ouvrir la page Open WebUI.
  1. Connectez-vous via [email protected] / adminadmin

Créer de l'IA avec l'IA

De l'idée au lancement — accélérez votre développement IA avec le co-codage IA gratuit, un environnement prêt à l'emploi et le meilleur prix pour les GPU.

Codage assisté par IA
GPU prêts à l’emploi
Tarifs les plus avantageux

HyperAI Newsletters

Abonnez-vous à nos dernières mises à jour
Nous vous enverrons les dernières mises à jour de la semaine dans votre boîte de réception à neuf heures chaque lundi matin
Propulsé par MailChimp