nb sau 13B 4k step100k : configuration requise et compatibilité GPU en local
← Tous les modèles

Modèle d’IA locale

nb sau 13B 4k step100k

par National Library of Norway AI Lab

0 des 22 machines de référence l’exécutent entièrement en mémoire accélérateur en contexte 8k, et 13 de plus avec délestage CPU.

13B Paramètres 4k Contexte maximal 1 Quantification Complète Couverture de compatibilité
Tester mon PC

Vue d’ensemble

Éditeur
National Library of Norway AI Lab
Famille
Borealis
Série
nb sau
Tâche
Génération de texte
Architecture
dense · llama
Paramètres
13B
Contexte maximal
4 096 tokens
Licence
llama2
Publication
2023-10-26
Formats
gguf, safetensors
Cache KV par token (f16)
819 200 B · attention standard, exact
Couverture de compatibilité
Complète : verdicts calculés
Dépôt source
NbAiLab/nb-sau-13b-4k-step100k
Page officielle
https://ai.nb.no/

Quantifications et tailles de fichiers

Quantification Runtime Poids Plancher mémoire à 4k Identité
F16gguf llama.cppNbAiLab/nb-sau-13b-4k-step100k/ggml-model-f16.gguf 24.2 GB 27.4 GB digest vérifié

Les tailles proviennent du registre du runtime ou du listing du dépôt. Le plancher mémoire ajoute le cache KV pour 4 096 tokens quand ce chiffre ne peut pas surestimer ; c’est une estimation, pas une exigence.

Runtimes

Compatibilité sur les machines de référence

Contexte 8k, 32 Go de RAM système, meilleure quantification cataloguée par machine.

Machine Mémoire Réponse Faits connus
GeForce RTX 3060 Laptop GPU 6GB 6.00 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 6.00 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 4060 8GB 8.00 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 8.00 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 3080 10GB 10.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 10.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 3060 12GB 12.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 12.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 4070 12GB 12.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 12.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 5070 12GB 12.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 12.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 4060 Ti 16GB 16.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 4080 16GB 16.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 5060 Ti 16GB 16.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 5080 16GB 16.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 3090 24GB 24.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 24.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 4090 24GB 24.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 24.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GB
GeForce RTX 5090 32GB 32.0 GB VRAM Fonctionne avec délestage CPU estimé · F16 Poids 24.2 GB vs 32.0 GB VRAM : tiennentCache KV à 8k : 6.25 GB
Radeon RX 7600 8GB 8.00 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 8.00 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Intel Arc B580 12GB 12.0 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 12.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Radeon RX 7800 XT 16GB 16.0 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Radeon RX 9070 XT 16GB 16.0 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Intel Arc A770 16GB 16.0 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 16.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Radeon RX 7900 XTX 24GB 24.0 GB VRAM Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 24.0 GB VRAM : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
MacBook Pro 14-inch M4 Max 36GB 36.0 GB unifiée Données insuffisantes non vérifié · F16 Poids 24.2 GB vs 36.0 GB unifiée : tiennentCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Mac mini M4 24GB 24.0 GB unifiée Ne tient pas estimé · F16 Poids 24.2 GB vs 24.0 GB unifiée : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown
Mac mini M4 Pro 24GB 24.0 GB unifiée Ne tient pas estimé · F16 Poids 24.2 GB vs 24.0 GB unifiée : ne tiennent pasCache KV à 8k : 6.25 GBprise en charge du runtime sur cette machine : unknown

Les réponses définitives (« fonctionne », « ne tient pas ») viennent du moteur calibré ou d’un test physique. Les lignes « potentiel » comparent seulement les poids à la mémoire : le reste du besoin n’est pas modélisé, ce ne sont donc pas des verdicts. Inconnu n’est jamais un échec.

Matériel pour ce modèle

Aucun GPU de référence ne l’exécute entièrement en VRAM en contexte 8k. Les plus petits poids (24.2 GB) demandent au moins 32 Go de mémoire accélérateur.

  • Plus petit artefact catalogué : 24.2 GB de poids (F16).
  • Aucun GPU catalogué ne le contient entièrement : les poids passent en RAM système, prévoyez au moins 64 Go.
  • Espace disque : 500 Go ou plus pour conserver ce modèle et ses variantes.
Ces liens ouvrent une recherche par catégorie de matériel, pas une recommandation de produit précis. Affiliate link — I may earn a commission from qualifying purchases. Ces liens ne modifient jamais une réponse de compatibilité. Ils suivent la mémoire que les données justifient, pas la commission.

Sources et preuves

0 champs mesurés, 20 sourcés, 4 estimés et 3 inconnus.

Fiche catalogue vérifiée le 2026-09-17.

Que peut faire tourner votre PC ?

Choisissez votre GPU et votre RAM pour voir chaque modèle catalogué qui tient, en séparant réponses testées, estimées et potentielles.

Tester mon PC