SPIRA / v3_scale /hashing /v1c_ctl_data /gap_ctl_data_push.md
thefinalboss's picture
hashing v1c_ctl_data: DIAG + gap (DESCRIPTIF, NON MESURABLE scale 0.025764), Checker leak audit + push PASS 01:45 (Toronto)
c77978b verified
|
Raw History Blame Contribute Delete
1.71 kB

v1c_ctl_data : DESCRIPTIF (aucune décision), ctl seul, NEW (v1c) contre REF (ctl M8cp1)

Run descriptif et NON MESURABLE : scale CALIBRATED ctl 0,025764, sous la borne 0,03.

Statut : DESCRIPTIF

Confusion déclarée : corpus différent, donc fenêtre seen différente (octets différents) ; Δseen et Δgap mélangent effet du corpus et dureté intrinsèque de la seen.

trained_frac : ref 1.0, new 1.0 (seuil 0.99)

Par fenêtre (acc en %, IC95 entre crochets ; écart NEW moins REF en points ; McNemar b, c, p) :

  • fc2 : REF 2,576 % [1,871 ; 3,294] ; NEW 7,852 % [6,396 ; 9,458] ; écart +5,276 [+3,726 ; +6,951] ; McNemar 4, 23, p 0,000311
  • fresh_en : REF 1,537 % [1,056 ; 2,059] ; NEW 3,415 % [2,816 ; 4,007] ; écart +1,878 [+1,132 ; +2,628] ; McNemar 6, 12, p 0,238
  • fresh_fr : REF 0,931 % [0,341 ; 1,705] ; NEW 2,654 % [1,530 ; 4,129] ; écart +1,723 [+0,628 ; +2,942] ; McNemar 1, 3, p 0,625
  • test20k : REF 1,538 % [1,067 ; 2,048] ; NEW 3,343 % [2,713 ; 4,012] ; écart +1,806 [+1,032 ; +2,594] ; McNemar 5, 8, p 0,581
  • test_v3 : REF 1,481 % [0,911 ; 2,091] ; NEW 2,731 % [1,793 ; 3,715] ; écart +1,249 [+0,173 ; +2,384] ; McNemar 5, 11, p 0,21
  • queries (à part) : REF 0,118 % [0,000 ; 0,295] ; NEW 2,703 % [2,308 ; 3,102] ; écart +2,585 [+2,196 ; +2,979] ; McNemar 0, 0, p 1
  • seen : REF 99,682 % [99,265 ; 100,000] ; NEW 93,183 % [91,920 ; 94,413] ; écart -6,499 [-7,799 ; -5,214] ; McNemar non applicable

gap REF 98,070 [97,590 ; 98,478] ; gap NEW 89,184 [87,842 ; 90,493] Δgap (NEW moins REF) -8,886 [-10,284 ; -7,514] ; Δfresh moyen +2,386 [+1,887 ; +2,906] ; Δseen -6,499 [-7,799 ; -5,214]

Script 31d4d10d13ff0f9d3465f404773e70efbd9a4de0c16aa15cc445db3a8d286c3c ; pic RSS 123,9 Mo.