Models · Résultat du Palier 1

Un signal net sur le langage RCP.
Pas encore une validation clinique.

Un composant de recherche destiné au langage médical français. Le Palier 1 montre une forte adaptation au langage réglementaire RCP ; aucun endpoint public ne le sert aujourd’hui.

Évaluation commune · 1 août 2026

Le corpus médical curé change fortement la probabilité du langage RCP.

59 textes RCP complets absents du corpus RCP d’entraînement, évalués dans les mêmes conditions.

Medyx Tier 15.53perplexité tenue à l’écart
Témoin générique30.35même corpus, même calcul
Écart observé5.49×perplexité plus faible pour Tier 1
Corpus commun59fiches RCP complètes
Ce que le résultat démontre

Une adaptation mesurable au registre réglementaire pharmaceutique français.

Sur cet échantillon BDPM commun, Tier 1 assigne une perplexité 5,49 fois plus faible que le témoin générique. Les deux checkpoints ont été évalués par loss pure sur les mêmes séquences, sans génération ni juge automatique.

Du POC à un composant utilisable

Le Palier 1 ferme une question. Il n’ouvre pas encore un modèle clinique.

  1. TerminéEntraînement

    Tier 1 et son témoin générique ont achevé leur run.

  2. TerminéComparaison commune

    La perplexité a été mesurée sur les mêmes 59 textes RCP.

  3. MaintenantConsolider la preuve

    Archiver les sorties, diversifier le corpus et documenter les empreintes.

  4. Palier suivantRevue clinique

    Noter exactitude, pertinence, hallucination et dangerosité avant tout usage médical.

État des contrôles

Ce qui est acquis. Ce qui reste bloquant.

Archiver les résultats reproductibles, diversifier le jeu de test et faire évaluer l’exactitude clinique avant toute revendication d’usage médical.

  • Run Tier 1 et témoin générique terminés
  • Même corpus RCP gelé et mêmes paramètres d’évaluation
  • Aucun chevauchement de CIS ou de texte RCP complet avec les 1 500 RCP d’entraînement
  • Archiver les sorties JSON et les empreintes des checkpoints
  • Répéter la mesure sur un échantillon stratifié par substance active
  • Faire noter l’exactitude et le risque clinique en aveugle

Lecture publique recommandée. Cette expérience conclut le POC d’adaptation au langage RCP. Elle ne permet pas de présenter Medyx comme cliniquement validé, plus exact dans ses réponses ou prêt à fournir un avis médical. Les sorties JSON brutes et les empreintes des checkpoints restent à consolider dans l’archive publique.