Fiche modèle
Llama 2-70B
Meta AI · poids ouverts · sorti le 18/07/2023
Date de sortie, éditeur et accès : Epoch AI, CC BY 4.0. Fiche régénérée le 07/10/2026.
Taille
70 Md
paramètres
Scores
Rang parmi les 274 modèles de l’indice ECI évalués par la même source. Un nom de benchmark mène à son explication.
| Benchmark | Score | Rang | Réglage | Source |
|---|---|---|---|---|
| Indice de capacités ECI (Epoch AI)Capacités générales | 113,8105,7–117,4 | 218 / 274 | Epoch AI, CC BY 4.0, non daté par la source, vu publié le 07/10/2026 | |
| LMArena texte, contrôle du styleConversation (préférence humaine) | 1 1711 165–1 176 | 153 / 166 | « llama-2-70b-chat » | LMArena, CC BY 4.0, publié le 02/10/2026 |
| GPQA Diamond (Epoch AI)Sciences | 26,3 %22,4–30,2 | 179 / 186 | réglage « Llama-2-70b-chat-hf » | Epoch AI, CC BY 4.0, publié le 27/01/2025 |
| FrontierMath, niveaux 1 à 3 (Epoch AI) | non évalué par Epoch AI | |||
| OTIS Mock AIME 2024-2025 (Epoch AI)Maths de concours | 0,0 %0,0–0,0 | 176 / 176 | réglage « Llama-2-70b-chat-hf » | Epoch AI, CC BY 4.0, publié le 25/02/2025 |
| SimpleQA Verified (Epoch AI) | non évalué par Epoch AI | |||
| SWE-bench Verified (Epoch AI) | non évalué par Epoch AI | |||
Sources : Epoch AI, « Capabilities & benchmarking », epoch.ai/benchmarks (CC BY 4.0) ; LMArena, leaderboard-dataset (Hugging Face), CC BY 4.0. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
Prix par fournisseur d’API
| Fournisseur | Entrée $/M | Sortie $/M | Mélangé | Clé LiteLLM |
|---|---|---|---|---|
| anyscale | 1,00 $ | 1,00 $ | 1,00 $ | anyscale/meta-llama/Llama-2-70b-chat-hf |
| Replicate | 0,65 $ | 2,75 $ | 1,18 $ | replicate/meta/llama-2-70b |
| Perplexity | 0,70 $ | 2,80 $ | 1,22 $ | perplexity/llama-2-70b-chat |
| Amazon Bedrock | 1,95 $ | 2,56 $ | 2,10 $ | meta.llama2-70b-chat-v1 |
$ par million de jetons, tarif catalogue sans remise, sans cache ni traitement par lots. 4 offres rapprochées. Écart entre le moins cher (anyscale, 1,00 $) et le plus cher : × 2,1. Relevé du 07/10/2026 ; vérifier chez le fournisseur avant de choisir. Sources : Prix : LiteLLM (BerriAI), licence MIT, © 2023 Berri AI. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
L’héberger soi-même
- Accès aux poids
- poids ouverts, usage restreint par la licence (Epoch AI, CC BY 4.0)
- Licence
- Llama 2 Community License (carte du dépôt, déclaration de l’éditeur lue le 01/10/2026 ; lire la licence avant tout usage commercial)
- Taille
- 70 Md de paramètres (Epoch AI, CC BY 4.0 ; note : « Llama has been released in 7B, 13B, 34B, and 70B variants. »)
- Poids
- huggingface.co/meta-llama/Llama-2-70b-chat-hf (dépôt rapproché par la table de correspondance, existence vérifiée auprès de Hugging Face le 01/10/2026) Téléchargement soumis à l’acceptation des conditions de l’éditeur sur le dépôt.
Mémoire nécessaire
| Format des poids | Poids seuls | Ordre de grandeur du matériel |
|---|---|---|
| BF16 (pleine précision usuelle) | 140 Go | deux à quatre cartes de 80 Go, ou un Mac de 192 Go |
| FP8 / 8 bits | 70 Go | une carte de centre de données de 80 Go, ou un Mac de 96 Go |
| 4 bits (GGUF Q4_K_M, environ 4,8 bits par paramètre) | 42 Go | deux cartes de 24 Go, ou un Mac de 64 Go de mémoire unifiée |
Calcul du Crible : 70 Md de paramètres × 2 octets (BF16), × 1 (FP8), × 0,6 environ (4 bits). Ajouter le cache de contexte, qui grandit avec la longueur des conversations et le nombre d’utilisateurs.
Outils
- vLLM (serveur, cartes graphiques) :
vllm serve meta-llama/Llama-2-70b-chat-hfsert le dépôt Hugging Face derrière une API compatible OpenAI. Le modèle doit être pris en charge par la version installée. - llama.cpp (ordinateur, processeur ou carte graphique) : lit les poids au format GGUF, souvent publiés en 4 bits par la communauté. Chercher une version GGUF (rien ne garantit qu’elle existe ni qu’elle est fidèle), puis
llama-server -hf <dépôt GGUF>. - Ollama (le plus simple sur un ordinateur) :
ollama run hf.co/<dépôt GGUF>lance une version GGUF publiée sur Hugging Face.
Commandes d’après la documentation de chaque outil (liens ci-dessus). Les tailles, l’accès et les liens viennent des sources citées ; de Hugging Face, Le Crible ne reprend que l’adresse du dépôt et l’identifiant de licence déclaré sur sa carte. Sources : Epoch AI, « Data on AI models », epoch.ai/data/ai-models (CC BY 4.0) ; LMArena, leaderboard-dataset (Hugging Face), CC BY 4.0. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
Évolution
Aucun changement de prix relevé depuis le début de nos relevés quotidiens.