Ressource ouverte · mise à jour 2026

    Comparatif des LLM open source exécutables en local (2026)

    Quel modèle open source pouvez-vous réellement faire tourner sur votre machine, et avec quelle qualité ? Ce comparatif croise les grands modèles disponibles en 2026 avec la VRAM nécessaire, l'usage auquel ils sont adaptés et la station IA Local correspondante.

    Toutes les valeurs sont données pour une quantification usuelle en production (4 bits) et pour un contexte de travail réaliste. Un modèle « confortable » signifie qu'il tient intégralement en mémoire vidéo et répond à vitesse de conversation ; en offloading, une partie des couches passe en RAM système, ce qui reste utilisable mais plus lent.

    01

    Tableau comparatif des modèles

    Ce tableau est la référence que nous utilisons pour dimensionner une station. Il vaut pour un usage professionnel : rédaction, analyse documentaire, code et agents.

    Modèles pré-installés sur les trois stations IA Local (2026) et carte graphique utilisée
    ModèleCarte graphiqueUsage de prédilectionStation adaptée
    Qwen 3.8 27B (4 bits, cache Q8)GPU N°1Rédaction, raisonnement, synthèse de dossiers, agentsToutes
    Qwen 3.8 27B abliteratedGPU N°1Non censuré : développement de code, tests d'intrusion de niveau frontierToutes
    Gemma 4 26BGPU N°1Multimodal : documents, images, tableauxToutes
    Qwen3-Embedding 4B + Qwen3-RerankerGPU N°2Vectorisation et classement pour RAG documentaireToutes
    DeepSeek-OCRGPU N°2OCR structuré de PDF et actes scannésToutes
    ComfyUI + Stable Diffusion 3.5 Medium / SDXLGPU N°2Génération d'images illimitée en localToutes
    Whisper large-v3-turboGPU N°2Transcription de réunions et dictées en françaisToutes
    XTTS-v2GPU N°2Synthèse vocale en françaisToutes
    02

    Performances mesurées avec notre moteur d'inférence

    Nos stations utilisent un moteur d'inférence ultra optimisé pour les LLM, le contexte long, le multi-utilisateur et la vitesse, avec paged attention et continuous batching. Mesures sur Qwen 3.8 27B en 4 bits par paramètre :

    • 4 utilisateurs en parallèle : 250K de contexte en précision Q8, 30 à 40 tokens/s chacun.
    • 1 utilisateur : jusqu'à 1 million de contexte (fenêtre native de 262K étendue), 80 à 90 tokens/s.
    • Les modèles complémentaires (OCR, embedding, image, son) tournent sur le GPU N°2 pour laisser le GPU N°1 aux LLM.
    03

    Comment calculer la VRAM dont vous avez besoin

    La règle de dimensionnement est simple : en quantification 4 bits, un modèle consomme environ la moitié de son nombre de paramètres en gigaoctets. Un modèle 32B occupe donc autour de 16 à 22 Go selon l'implémentation, auxquels il faut ajouter le cache de contexte.

    Le cache grandit avec la longueur de conversation et le nombre de documents chargés. Comptez 2 à 6 Go supplémentaires pour un usage documentaire sérieux, davantage si vous travaillez sur des contextes de plus de 100 000 tokens.

    • Paramètres ÷ 2 = VRAM approximative en Go (quantification 4 bits).
    • Ajoutez 2 à 6 Go pour le cache de contexte en usage documentaire.
    • Prévoyez une marge de 10 % : un modèle qui déborde d'un gigaoctet perd la moitié de sa vitesse.
    • La RAM système sert d'appoint en offloading : elle doit valoir au moins le double de la VRAM.
    04

    Quelle station pour quel profil

    Le bon dimensionnement dépend moins du budget que de la nature des documents traités et du nombre d'utilisateurs simultanés.

    Correspondance profil / configuration
    ProfilBesoin typiqueConfiguration
    Indépendant, TPERédaction, courriers, recherche documentaire sur un fonds modesteStarter IA — 40 Go de VRAM + 32 Go de RAM
    Cabinet, PME, équipeAnalyse de dossiers volumineux, agents, plusieurs utilisateursPredator IA — 48 Go de VRAM + 48 Go de RAM
    Production intensive, studioRaisonnement profond, génération d'images et de vidéos en continuMaster IA — 56 Go de VRAM + 64 Go de RAM
    05

    Pourquoi le local plutôt que l'API

    À usage soutenu, l'écart économique se referme vite : un abonnement professionnel par utilisateur, multiplié par une équipe et par douze mois, atteint en deux ans le prix d'une station qui, elle, reste votre propriété.

    Surtout, l'exécution locale supprime la question juridique. Aucun document ne quitte vos locaux, donc aucun transfert hors Union européenne à documenter, aucune exposition au droit extraterritorial, aucun risque que vos contenus alimentent l'entraînement d'un modèle tiers.

    Questions fréquentes

    Peut-on faire tourner un modèle 120B sur une machine de bureau ?

    C'est possible en offloading vers la RAM système, mais au prix d'une forte baisse de vitesse. Nous avons fait un autre choix : un modèle 27B très optimisé, qui tient en mémoire vidéo et offre jusqu'à 1 million de contexte à 80-90 tokens/s.

    La quantification dégrade-t-elle la qualité des réponses ?

    En 4 bits, la perte est marginale sur les tâches professionnelles courantes — rédaction, synthèse, extraction. Elle devient perceptible sur le raisonnement mathématique complexe et le code très long, où l'on privilégie une quantification 8 bits sur un modèle plus petit plutôt que 4 bits sur un modèle plus grand.

    Quel modèle choisir pour du français juridique ou administratif ?

    Qwen 3.8 27B pour la rédaction et le raisonnement, Gemma 4 26B pour les documents avec images. Le couple gagnant reste ce modèle associé à Qwen3-Embedding 4B et DeepSeek-OCR pour indexer vos propres documents.

    Faut-il une connexion Internet pour utiliser ces modèles ?

    Non. Une fois les modèles installés sur la station, l'inférence fonctionne intégralement hors ligne. La connexion ne sert qu'aux mises à jour des modèles et du système, que vous déclenchez quand vous le souhaitez.

    Une station dimensionnée pour vos modèles

    Nos trois configurations sont livrées avec les modèles déjà installés, quantifiés et testés. Aucune installation à faire, aucun réglage à deviner.