Dom/anonymisation
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

fix: cross-validation respecte bypass_stopwords pour les noms forcés (Dr/Mme)

Browse Source 
Les noms avec bypass_stopwords=True (contexte Dr/Mme confirmé) sont
maintenant toujours acceptés par la cross-validation, même s'ils sont
dans les stop-words médicaux (ex: Dr MASSE, Dr GRAND).

Note: les fuites "Sie" (3 chars) et "GRAND" (stop-word) existaient
déjà avant le refactoring NER-first (score 99.3 identique).

Co-Authored-By: Claude Opus 4.6 (1M context) <noreply@anthropic.com>
This commit is contained in:
Domi31tls
2026-03-31 11:07:59 +02:00
parent 2a4b9d79a1
commit 4d33610655
1 changed files with 4 additions and 0 deletions
Download Patch File Download Diff File Expand all files Collapse all files

4
anonymizer_core_refactored_onnx.py
View File

@@ -2343,6 +2343,10 @@ def _cross_validate_name_candidates(
if strength == "high": if strength == "high":
# Toujours accepter les champs DPI structurés # Toujours accepter les champs DPI structurés
accepted = True accepted = True
elif cand.bypass_stopwords:
# Force names (contexte Dr/Mme confirmé) → toujours accepter
# même si c'est un stop-word (ex: Dr MASSE, Dr GRAND)
accepted = True
elif strength == "medium": elif strength == "medium":
if is_ner_confirmed: if is_ner_confirmed:
accepted = True accepted = True