Dom/anonymisation
1
0
Fork 0
Code Issues Pull Requests Actions Packages Projects Releases Wiki Activity

feat(phase2): Fine-tuning CamemBERT-bio v2 (F1=0.90) + enrichissement données

Browse Source 
- Fine-tuning camembert-bio-base : F1=0.903, Recall=0.930 (vs 0.89/0.85)
- Data augmentation : substitution noms INSEE (219K patronymes, x3 copies)
- Hard negatives BDPM (5.7K médicaments) + QUAERO (1319 termes médicaux)
- Annotations silver enrichies par gazetteers (+612 VILLE, +5 HOPITAL)
- Export silver avec support multi-répertoires (--extra-dir)
- Gazetteers QUAERO : CHEM, DISO, PROC, ANAT depuis DrBenchmark/QUAERO
- Gazetteers INSEE : noms de famille fréquents (96K) et complets (219K)
- Batch silver 1194 PDFs (run_batch_silver_export.py) pour dataset v3

Co-Authored-By: Claude Opus 4.6 <noreply@anthropic.com>
This commit is contained in:
Domi31tls
2026-03-10 02:06:08 +01:00
parent 274e2fa586
commit c9572c383a
38 changed files with 318811 additions and 1406 deletions
Download Patch File Download Diff File Expand all files Collapse all files

180
data/silver_annotations/trackare-BA093659-23074520_BA093659_23074520.bio
View File

@@ -64,7 +64,7 @@ DU I-ADRESSE
PARC I-ADRESSE
DES I-ADRESSE
SPORTS I-ADRESSE
Ville O
Ville B-VILLE
de O
résidence: O
ST B-VILLE
@@ -89,7 +89,7 @@ d'admission: O
16/04/2023 O
Heure O
d'admission: O
01:22 B-TEL
01:22 O
Date O
de O
sortie: O
@@ -166,7 +166,7 @@ Date I-TEL
Episode O
- O
Heure O
01:22 B-TEL
01:22 O
Mode O
de O
transport O
@@ -205,7 +205,7 @@ Motif O
de O
prise O
en O
charge O
charge B-VILLE
Douleur O
abdominale O
douleur O
@@ -278,16 +278,16 @@ Date O
de O
prise O
en O
charge O
charge B-VILLE
médicale O
16/04/2023 O
Heure O
de O
prise O
en O
charge O
charge B-VILLE
médicale O
01:22 B-TEL
01:22 O
Médecin O
de O
la O
@@ -434,8 +434,8 @@ Note O
Aucune O
donnée O
renseignée O
Signes O
vitaux O
Signes B-PER
vitaux I-PER
Item O
de O
surveillance O
@@ -606,8 +606,8 @@ PRO I-PER
Protéinurie O
Glycémie O
capillaire O
Signes O
Vitaux O
Signes B-PER
Vitaux I-PER
Maternité O
Item O
de O
@@ -1121,7 +1121,7 @@ de O
fièvre O
ou O
de O
signes O
signes B-VILLE
d'ictère. O
Ce O
jour, O
@@ -1448,7 +1448,7 @@ modérée O
avec O
émoussement O
des O
bords O
bords B-VILLE
hépatiques, O
non O
dysmorphique, O
@@ -1502,7 +1502,7 @@ sans O
signe O
de O
complication. O
Bonne O
Bonne B-VILLE
perméabilité O
des O
vaisseaux O
@@ -1599,8 +1599,8 @@ pas O
de O
TJ O
Sur O
le O
plan O
le B-VILLE
plan I-VILLE
respiratoire O
: O
MMV O
@@ -1616,8 +1616,8 @@ pas O
de O
cyanose O
Sur O
le O
plan O
le B-VILLE
plan I-VILLE
dig O
: O
abdo O
@@ -1660,8 +1660,8 @@ de O
déficit O
SM O
Sur O
le O
plan O
le B-VILLE
plan I-VILLE
urinaire O
: O
pas O
@@ -1994,7 +1994,7 @@ BAU I-PER
15:26 O
Note O
IDE O
Agnes B-PER
Agnes O
SAINT- O
GERMES O
16/04/2023 O
@@ -2056,7 +2056,7 @@ ce O
jour O
vu O
avec O
Anais B-PER
Anais B-VILLE
interne O
viscérale O
-RDV O
@@ -2437,7 +2437,7 @@ IDE O
Celine B-PER
BAREA I-PER
16/04/2023 O
01:59 O
01:59 B-TEL
Traitements O
médicamenteux O
Prescription O
@@ -2519,8 +2519,8 @@ Normal O
DR. O
Lydia B-PER
KARAM I-PER
PARACETAMOL O
BBM O
PARACETAMOL I-PER
BBM I-PER
10MG/ML O
INJ O
100ML O
@@ -2540,7 +2540,7 @@ BLANCHARD I-PER
Le O
débit O
en O
cours O
cours B-VILLE
est O
: O
24 O
@@ -2590,7 +2590,7 @@ modifié. O
Le O
débit O
en O
cours O
cours B-VILLE
est O
: O
6 O
@@ -2626,7 +2626,7 @@ modifié. O
Le O
débit O
en O
cours O
cours B-VILLE
est O
: O
60 O
@@ -2740,8 +2740,8 @@ Normal O
DR. O
Lydia B-PER
KARAM I-PER
NEFOPAM O
MYL O
NEFOPAM I-PER
MYL I-PER
20MG/2ML O
SOL O
INJ O
@@ -3309,8 +3309,8 @@ CAMANO I-PER
ALVARADO I-PER
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
Signé O
- O
Matin O
@@ -3391,8 +3391,8 @@ DOULEUR O
: O
SURV O
Signé O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -3611,7 +3611,7 @@ Page O
9 O
de O
24 O
Plan O
Plan B-VILLE
de O
soins O
Jour O
@@ -3718,8 +3718,8 @@ dose: O
20:00 O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -3756,8 +3756,8 @@ un O
sucre O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -3794,8 +3794,8 @@ un O
sucre O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -5323,8 +5323,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -5343,8 +5343,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -5363,8 +5363,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -5602,8 +5602,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -5679,8 +5679,8 @@ Signé O
— O
TOILETTE O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
à O
08h O
@@ -6073,8 +6073,8 @@ Début: O
15:02 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -6101,8 +6101,8 @@ Début: O
15:02 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -6129,8 +6129,8 @@ Début: O
15:02 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -6157,8 +6157,8 @@ Début: O
15:02 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -6312,7 +6312,7 @@ Page O
15 O
de O
24 O
Plan O
Plan B-VILLE
de O
soins O
Jour O
@@ -6364,8 +6364,8 @@ dose: O
20:00 O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -6402,8 +6402,8 @@ un O
sucre O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -6440,8 +6440,8 @@ un O
sucre O
Signé O
— O
NEFOPAM O
MYL O
NEFOPAM B-PER
MYL I-PER
20 O
MG O
SOL O
@@ -7967,8 +7967,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -7987,8 +7987,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -8007,8 +8007,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -8027,8 +8027,8 @@ Signé O
— O
REPAS O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
Matin O
midi O
@@ -8323,8 +8323,8 @@ Signé O
— O
TOILETTE O
: O
AIDE O
PARTIELLE O
AIDE B-PER
PARTIELLE I-PER
- O
à O
08h O
@@ -8492,8 +8492,8 @@ Début: O
15:02 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -8756,8 +8756,8 @@ le O
14:00 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -8799,8 +8799,8 @@ le O
1 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -8842,8 +8842,8 @@ le O
1 O
Signé O
— O
SIGNES O
VITAUX O
SIGNES B-PER
VITAUX I-PER
(Pls, O
TA, O
FR, O
@@ -8894,7 +8894,7 @@ rendu O
au O
format O
texte O
Bayonne, O
Bayonne, B-VILLE
le O
16/04/2023 O
Docteur O
@@ -9054,7 +9054,7 @@ modérée O
avec O
émoussement O
des O
bords O
bords B-VILLE
hépatiques, O
non O
dysmorphique, O
@@ -9108,7 +9108,7 @@ sans O
signe O
de O
complication. O
Bonne O
Bonne B-VILLE
perméabilité O
des O
vaisseaux O
@@ -9956,7 +9956,7 @@ de O
fièvre O
ou O
de O
signes O
signes B-VILLE
d'ictère. O
Ce O
jour, O
@@ -10102,8 +10102,8 @@ ne O
pas O
porter O
de O
charge O
lourde O
charge B-VILLE
lourde B-VILLE
pendant O
1 O
mois. O