IA LAB

Laboratoire de tests IA open source

Outils pour utilisateurs

Outils du site


syntheses:nextcloud

Différences

Ci-dessous, les différences entre deux révisions de la page.

Lien vers cette vue comparative

Prochaine révision
Révision précédente
syntheses:nextcloud [2026/05/13 10:21] – créée cossyntheses:nextcloud [2026/05/18 19:14] (Version actuelle) cos
Ligne 3: Ligne 3:
 Analyse croisée des résultats RAG sur le manuel officiel Nextcloud · Ollama + AnythingLLM · Protocole N0 / N1 / N2 · 3 configurations matérielles Analyse croisée des résultats RAG sur le manuel officiel Nextcloud · Ollama + AnythingLLM · Protocole N0 / N1 / N2 · 3 configurations matérielles
  
-{{tag>type:synthese corpus:nextcloud categorie:technique-it}}+{{ :wiki:synth-ia.webp |}} 
  
 ===== Contexte de la série ===== ===== Contexte de la série =====
Ligne 47: Ligne 48:
 </WRAP> </WRAP>
  
-<WRAP round tip>+<WRAP round info>
 **Signal transversal · Q6 · croisement de sections réussi par tous sauf phi4** **Signal transversal · Q6 · croisement de sections réussi par tous sauf phi4**
  
Ligne 53: Ligne 54:
 </WRAP> </WRAP>
  
-===== Analyse · les inversions de niveau sur ce corpus technique ===== 
- 
-<WRAP round alert> 
-**Deux inversions documentées : N0 meilleur pour le 14B, N1 meilleur pour le 3B** 
-</WRAP> 
  
 ^ Modèle          ^ N0       ^ N1          ^ N2    ^ Niveau optimal ^ ^ Modèle          ^ N0       ^ N1          ^ N2    ^ Niveau optimal ^
Ligne 79: Ligne 75:
 Le 8B occupe une position médiane remarquable : 3,33/5 constant sur les trois niveaux, sans l'inversion du 14B ni la volatilité du 3B. Les deux angles morts (Q2 et Q4) sont structurels et non résolus par aucun niveau de préparation. **Recommandation :** ajuster la taille et le chevauchement des chunks AnythingLLM sur les sections 4.3 et 4.9 du corpus avant tout nouveau test sur ce modèle. Le 8B occupe une position médiane remarquable : 3,33/5 constant sur les trois niveaux, sans l'inversion du 14B ni la volatilité du 3B. Les deux angles morts (Q2 et Q4) sont structurels et non résolus par aucun niveau de préparation. **Recommandation :** ajuster la taille et le chevauchement des chunks AnythingLLM sur les sections 4.3 et 4.9 du corpus avant tout nouveau test sur ce modèle.
  
-===== Comportements notables ===== 
- 
-<WRAP round alert> 
-**Hallucinations administrateur · un comportement spécifique au corpus technique** 
- 
-Sur le corpus FWB, les hallucinations portaient sur des termes pédagogiques locaux. Sur le corpus Nextcloud, un comportement nouveau apparaît : le 14B en N2 et le 3B en N2 construisent des réponses d'administrateur système complètes (paramètres config.php, extensions PHP, configuration WebRTC, ports TURN) sur des questions qui appelaient uniquement des réponses utilisateur. Ces réponses sont techniquement plausibles et bien rédigées, ce qui les rend particulièrement difficiles à détecter. 
-</WRAP> 
- 
-<WRAP round info> 
-**Corpus anglais, questions françaises · aucun impact observé sur les modèles Ministral** 
- 
-Les trois modèles Ministral répondent en français à partir du corpus anglais sans confusion linguistique ni erreur de traduction sur les termes techniques. Résultat notable pour un déploiement RAG en accompagnement d'organisations francophones utilisant des outils open source documentés en anglais. 
-</WRAP> 
- 
-<WRAP round tip> 
-**Le chunking RAG comme variable déterminante · signal adressé à l'infrastructure** 
- 
-L'angle mort persistant sur Q2 pour trois modèles sur quatre, et sur Q4 pour le 8B, n'est pas imputable aux modèles eux-mêmes. Les sections concernées existent dans le corpus mais ne sont jamais récupérées par AnythingLLM, quel que soit le niveau de préparation. La taille des chunks et le taux de chevauchement sont des paramètres critiques sur un corpus de plus de 7 000 lignes. 
-</WRAP> 
  
 ===== Enseignements transversaux ===== ===== Enseignements transversaux =====
- 
-<WRAP round box> 
-**Le corpus technique inverse les conclusions du corpus pédagogique** 
- 
-Sur le corpus FWB, le 8B dominait (4,67/5 en N2) et le N2 était le meilleur niveau pour tous les modèles. Sur le corpus Nextcloud, le 14B prend la tête avec N0 comme meilleur niveau, et le 3B préfère N1. La nature du corpus conditionne les résultats autant que la taille du modèle. 
-</WRAP> 
  
 <WRAP round box> <WRAP round box>
Ligne 186: Ligne 157:
 Résultats individuels : [[tests:nextcloud_ministral-3b_pc-portable|Ministral 3 3B]] · [[tests:nextcloud_ministral-3-8b_serveur-light|Ministral 3 8B]] · [[tests:nextcloud_ministral-3-14b_serveur-ia|Ministral 3 14B]] · [[tests:nextcloud_phi4-mini_pc-portable|phi4-mini 3.8B]] Résultats individuels : [[tests:nextcloud_ministral-3b_pc-portable|Ministral 3 3B]] · [[tests:nextcloud_ministral-3-8b_serveur-light|Ministral 3 8B]] · [[tests:nextcloud_ministral-3-14b_serveur-ia|Ministral 3 14B]] · [[tests:nextcloud_phi4-mini_pc-portable|phi4-mini 3.8B]]
  
-[[protocole|Protocole de test complet]]+[[:telechargements|Corpus et questionnaires utilisés · page Téléchargements]] 
 +---- 
 + 
 +<WRAP round tip> 
 +**Votre organisation envisage de déployer de l'IA locale ?** Comptoir Open Source accompagne les PME, associations et institutions dans la mise en place d'une infrastructure IA locale open source : sélection des modèles, configuration matérielle, déploiement des outils. [[https://comptoiropensource.org|comptoiropensource.org]] 
 +</WRAP>
syntheses/nextcloud.1778667671.txt.gz · Dernière modification : de cos