Profil atypique : N1 meilleur que N2

Sur l'ensemble des tests IA LAB, le Markdown structuré améliore généralement les performances. Ministral 3 3B fait exception : la conversion TXT simple produit la meilleure sobriété et les meilleurs scores. Pour un modèle de cette taille, moins de structure formelle semble produire moins de sur-interprétation.

Fiabilité conditionnelle sur les procédures techniques

Q3 (WebDAV Linux) est la question qui progresse le mieux avec la préparation du corpus. Les procédures techniques bien délimitées dans le document sont bien restituées en N1 et N2. En revanche, dès que le corpus est muet ou que la question est ambiguë, le modèle comble le vide, parfois avec des options inventées présentées avec assurance.

Anti-hallucination : comportement instable selon le niveau

Le réflexe de refus existe (visible en N1 sur Q2 et Q4) mais il n'est pas ancré. En N0 et N2, le même modèle sur les mêmes questions produit des contenus inventés. Cette instabilité est le principal signal de risque pour un usage RAG en autonomie sur un corpus technique.

Vitesse : atout réel pour un usage embarqué

Entre 19 et 24 tok/s sur une RTX 3050 4 Go, Ministral 3 3B offre une vitesse de réponse notable pour un modèle de 3 Go. Avantage concret pour un déploiement sur poste de travail individuel, même si les performances RAG limitent l'usage aux questions simples avec supervision.

N0 · ★★☆☆☆ · Non adapté · hallucinations techniques trop fréquentes

2,83/5 en moyenne. Le modèle restitue correctement les informations simples (Q1) mais invente des options de montage, des conditions d'administration et des commandes non documentées sur les questions complexes. Usage en production sans supervision : non recommandé.

N1 · ★★★☆☆ · Limité · meilleur niveau pour ce modèle, supervision indispensable

3,67/5 en moyenne. Le format TXT produit une sobriété bénéfique : le modèle reconnaît ses lacunes et restitue les procédures techniques sans erreur bloquante. Reste insuffisant sur Q5 et les questions ambiguës. Meilleure configuration de la session, mais supervision requise.

N2 · ★★☆☆☆ · Non adapté · la structuration Markdown aggrave les dérives

2,83/5 en moyenne. Contre toute attente, le corpus Markdown produit davantage d'hallucinations que le TXT brut. Les réponses inventées sont plus longues, plus détaillées et plus assurées qu'en N0. Ce résultat déconseille le format Markdown pour ce modèle sur ce type de corpus technique.