Fiche modèle
Inkling-Small
Thinking Machines · poids ouverts · sorti le 15/07/2026
Date de sortie, éditeur et accès : Epoch AI, CC BY 4.0. Fiche régénérée le 07/10/2026.
Taille
276 Md
12 Md actifs
Scores
Rang parmi les 274 modèles de l’indice ECI évalués par la même source. Un nom de benchmark mène à son explication.
| Benchmark | Score | Rang | Réglage | Source |
|---|---|---|---|---|
| Indice de capacités ECI (Epoch AI)Capacités générales | 150,2147,4–152,0 | 52 / 274 | Epoch AI, CC BY 4.0, non daté par la source, vu publié le 07/10/2026 | |
| LMArena texte, contrôle du styleConversation (préférence humaine) | 1 4051 400–1 410 | 76 / 166 | « Inkling Small » | LMArena, CC BY 4.0, publié le 02/10/2026 |
| GPQA Diamond (Epoch AI)Sciences | 88,5 %84,8–92,3 | 46 / 186 | réglage « inkling-small_xhigh » | Epoch AI, CC BY 4.0, publié le 14/08/2026 |
| FrontierMath, niveaux 1 à 3 (Epoch AI)Maths | 46,3 %40,5–52,1 | 48 / 81 | réglage « inkling-small_xhigh » | Epoch AI, CC BY 4.0, publié le 14/08/2026 |
| OTIS Mock AIME 2024-2025 (Epoch AI)Maths de concours | 90,0 %82,2–97,8 | 52 / 176 | réglage « inkling-small_xhigh » | Epoch AI, CC BY 4.0, publié le 14/08/2026 |
| SimpleQA Verified (Epoch AI)Connaissances factuelles | 19,1 %16,7–21,5 | 67 / 77 | réglage « inkling-small_xhigh » | Epoch AI, CC BY 4.0, publié le 27/08/2026 |
| SWE-bench Verified (Epoch AI) | non évalué par Epoch AI | |||
Sources : Epoch AI, « Capabilities & benchmarking », epoch.ai/benchmarks (CC BY 4.0) ; LMArena, leaderboard-dataset (Hugging Face), CC BY 4.0. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
Prix par fournisseur d’API
| Fournisseur | Entrée $/M | Sortie $/M | Mélangé | Clé LiteLLM |
|---|---|---|---|---|
| DeepInfra | 0,45 $ | 1,20 $ | 0,64 $ | deepinfra/thinkingmachines/Inkling-Small |
| Baseten | 0,50 $ | 1,20 $ | 0,68 $ | baseten/thinkingmachines/inkling-small |
$ par million de jetons, tarif catalogue sans remise, sans cache ni traitement par lots. 2 offres rapprochées. Écart entre le moins cher (DeepInfra, 0,64 $) et le plus cher : × 1,1. Relevé du 07/10/2026 ; vérifier chez le fournisseur avant de choisir. Sources : Prix : LiteLLM (BerriAI), licence MIT, © 2023 Berri AI. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
L’héberger soi-même
- Accès aux poids
- poids libres (usage sans restriction) (Epoch AI, CC BY 4.0)
- Licence
- Apache 2.0 (carte du dépôt, déclaration de l’éditeur lue le 01/10/2026 ; lire la licence avant tout usage commercial)
- Taille
- 276 Md de paramètres, dont 12 Md actifs à chaque jeton (modèle à experts) (Epoch AI, CC BY 4.0 ; note : « 12B active »)
- Poids
- huggingface.co/thinkingmachines/Inkling-Small (dépôt rapproché par la table de correspondance, existence vérifiée auprès de Hugging Face le 01/10/2026)
Mémoire nécessaire
| Format des poids | Poids seuls | Ordre de grandeur du matériel |
|---|---|---|
| BF16 (pleine précision usuelle) | 552 Go | un serveur à huit cartes de 80 Go (640 Go) |
| FP8 / 8 bits | 276 Go | un serveur à huit cartes de 80 Go (640 Go) |
| 4 bits (GGUF Q4_K_M, environ 4,8 bits par paramètre) | 166 Go | deux à quatre cartes de 80 Go, ou un Mac de 192 Go |
Calcul du Crible : 276 Md de paramètres × 2 octets (BF16), × 1 (FP8), × 0,6 environ (4 bits). Ajouter le cache de contexte, qui grandit avec la longueur des conversations et le nombre d’utilisateurs. Un modèle à experts doit charger tous ses paramètres en mémoire, mais n’en calcule que 12 Md par jeton : il répond plus vite que sa taille ne le laisse penser.
Outils
- vLLM (serveur, cartes graphiques) :
vllm serve thinkingmachines/Inkling-Smallsert le dépôt Hugging Face derrière une API compatible OpenAI. Le modèle doit être pris en charge par la version installée. - llama.cpp (ordinateur, processeur ou carte graphique) : lit les poids au format GGUF, souvent publiés en 4 bits par la communauté. Chercher une version GGUF (rien ne garantit qu’elle existe ni qu’elle est fidèle), puis
llama-server -hf <dépôt GGUF>. - Ollama (le plus simple sur un ordinateur) :
ollama run hf.co/<dépôt GGUF>lance une version GGUF publiée sur Hugging Face.
Commandes d’après la documentation de chaque outil (liens ci-dessus). Les tailles, l’accès et les liens viennent des sources citées ; de Hugging Face, Le Crible ne reprend que l’adresse du dépôt et l’identifiant de licence déclaré sur sa carte. Sources : Epoch AI, « Data on AI models », epoch.ai/data/ai-models (CC BY 4.0) ; LMArena, leaderboard-dataset (Hugging Face), CC BY 4.0. Données adaptées : pourcentages, arrondis, meilleur réglage retenu, prix mélangé, rangs et frontière calculés ici.
Évolution
Aucun changement de prix relevé depuis le début de nos relevés quotidiens.