vistarc-research-notes / data /matched_seeds.json
AwakeningOS's picture
Publish bilingual VISTARC research notebook and evidence-linked model explorer
3897c38 verified
Raw History Blame Contribute Delete
12.1 kB
[
{
"family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.67611111111111,
"sample_sd": 0.47755913925029597,
"min": 47.30833333333333,
"max": 48.215833333333336,
"values": [
47.30833333333333,
48.215833333333336,
47.50416666666667
]
},
"five_axis": {
"mean": 49.91733333333333,
"sample_sd": 0.06664332924857254,
"min": 49.846,
"max": 49.978,
"values": [
49.928,
49.846,
49.978
]
},
"accuracy_mean": {
"blimp_filtered": 68.75333333333333,
"supplement_filtered": 57.97,
"ewok_filtered": 51.156666666666666,
"entity_tracking": 19.536666666666665,
"comps": 52.17,
"global_piqa_parallel": 24.273333333333333,
"global_piqa_nonparallel": 48.666666666666664
}
},
{
"family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014"
],
"words_M": 70.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 48.708888888888886,
"sample_sd": 0.10405104694509736,
"min": 48.589166666666664,
"max": 48.7775,
"values": [
48.76,
48.7775,
48.589166666666664
]
},
"five_axis": {
"mean": 51.054,
"sample_sd": 0.11677328461596252,
"min": 50.974,
"max": 51.188,
"values": [
51.188,
51.0,
50.974
]
},
"accuracy_mean": {
"blimp_filtered": 70.17333333333333,
"supplement_filtered": 59.23,
"ewok_filtered": 51.49666666666667,
"entity_tracking": 22.01,
"comps": 52.36,
"global_piqa_parallel": 23.299999999999997,
"global_piqa_nonparallel": 50.666666666666664
}
},
{
"family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014",
"run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014"
],
"words_M": 80.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 49.047222222222224,
"sample_sd": 0.1868866511294198,
"min": 48.840833333333336,
"max": 49.205,
"values": [
48.840833333333336,
49.09583333333333,
49.205
]
},
"five_axis": {
"mean": 51.187333333333335,
"sample_sd": 0.17406129188689004,
"min": 51.016,
"max": 51.364,
"values": [
51.364,
51.182,
51.016
]
},
"accuracy_mean": {
"blimp_filtered": 69.32,
"supplement_filtered": 60.71333333333333,
"ewok_filtered": 51.98,
"entity_tracking": 21.506666666666668,
"comps": 52.416666666666664,
"global_piqa_parallel": 21.36,
"global_piqa_nonparallel": 55.333333333333336
}
},
{
"family": "IPRLM320_FFN_CONDITIONAL_BYPASS_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED137_20261015",
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED20260907_20261015",
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED731946281_20261015"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.531666666666666,
"sample_sd": 0.35446066229006207,
"min": 47.16916666666667,
"max": 47.8775,
"values": [
47.54833333333333,
47.8775,
47.16916666666667
]
},
"five_axis": {
"mean": 50.16866666666667,
"sample_sd": 0.3756398984843482,
"min": 49.77,
"max": 50.516,
"values": [
50.516,
50.22,
49.77
]
},
"accuracy_mean": {
"blimp_filtered": 68.76,
"supplement_filtered": 57.20333333333333,
"ewok_filtered": 52.266666666666666,
"entity_tracking": 20.486666666666665,
"comps": 52.126666666666665,
"global_piqa_parallel": 21.36,
"global_piqa_nonparallel": 47.333333333333336
}
},
{
"family": "IPRLM320_FFN_CONDITIONAL_BYPASS_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED137_20261015",
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED20260907_20261015",
"run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED731946281_20261015"
],
"words_M": 70.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 48.24944444444444,
"sample_sd": 0.2663100914625932,
"min": 47.945,
"max": 48.439166666666665,
"values": [
48.439166666666665,
48.36416666666667,
47.945
]
},
"five_axis": {
"mean": 50.69466666666666,
"sample_sd": 0.16753905017437926,
"min": 50.592,
"max": 50.888,
"values": [
50.888,
50.604,
50.592
]
},
"accuracy_mean": {
"blimp_filtered": 69.52333333333333,
"supplement_filtered": 58.193333333333335,
"ewok_filtered": 52.35333333333333,
"entity_tracking": 20.97,
"comps": 52.43333333333333,
"global_piqa_parallel": 20.713333333333335,
"global_piqa_nonparallel": 51.333333333333336
}
},
{
"family": "IPRLM320_FFN_G_RMS_SEED",
"seeds": [
20260907,
731946281
],
"run_ids": [
"run/IPRLM320_FFN_G_RMS_SEED20260907_20261014",
"run/IPRLM320_FFN_G_RMS_SEED731946281_20261014"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.973333333333336,
"sample_sd": 0.06717514421272121,
"min": 47.92583333333334,
"max": 48.020833333333336,
"values": [
47.92583333333334,
48.020833333333336
]
},
"five_axis": {
"mean": 50.135,
"sample_sd": 0.19374725804511467,
"min": 49.998,
"max": 50.272,
"values": [
50.272,
49.998
]
},
"accuracy_mean": {
"blimp_filtered": 69.46000000000001,
"supplement_filtered": 57.64,
"ewok_filtered": 51.370000000000005,
"entity_tracking": 19.845,
"comps": 52.36,
"global_piqa_parallel": 22.33,
"global_piqa_nonparallel": 52.0
}
},
{
"family": "IPRLM336_FFN1120_ADDITIVE_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM336_FFN1120_ADDITIVE_SEED137_20261016",
"run/IPRLM336_FFN1120_ADDITIVE_SEED20260907_20261016",
"run/IPRLM336_FFN1120_ADDITIVE_SEED731946281_20261016"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.596666666666664,
"sample_sd": 0.41533871719357096,
"min": 47.119166666666665,
"max": 47.87416666666667,
"values": [
47.119166666666665,
47.79666666666667,
47.87416666666667
]
},
"five_axis": {
"mean": 50.04666666666667,
"sample_sd": 0.3194265695482005,
"min": 49.81,
"max": 50.41,
"values": [
49.81,
49.92,
50.41
]
},
"accuracy_mean": {
"blimp_filtered": 68.58666666666667,
"supplement_filtered": 57.77,
"ewok_filtered": 51.166666666666664,
"entity_tracking": 20.60333333333333,
"comps": 52.10666666666667,
"global_piqa_parallel": 21.36,
"global_piqa_nonparallel": 49.333333333333336
}
},
{
"family": "IPRLM336_FFN1176_ADDITIVE_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM336_FFN1176_ADDITIVE_SEED137_20261016",
"run/IPRLM336_FFN1176_ADDITIVE_SEED20260907_20261016",
"run/IPRLM336_FFN1176_ADDITIVE_SEED731946281_20261016"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.8575,
"sample_sd": 0.4016709889117376,
"min": 47.43083333333333,
"max": 48.22833333333333,
"values": [
47.43083333333333,
48.22833333333333,
47.913333333333334
]
},
"five_axis": {
"mean": 50.36066666666667,
"sample_sd": 0.6009137486639292,
"min": 49.684,
"max": 50.832,
"values": [
49.684,
50.832,
50.566
]
},
"accuracy_mean": {
"blimp_filtered": 69.02666666666667,
"supplement_filtered": 58.06,
"ewok_filtered": 52.39,
"entity_tracking": 20.12,
"comps": 52.20666666666666,
"global_piqa_parallel": 21.683333333333334,
"global_piqa_nonparallel": 49.0
}
},
{
"family": "IPRLM336_FFN1232_ADDITIVE_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM336_FFN1232_ADDITIVE_SEED137_20261016",
"run/IPRLM336_FFN1232_ADDITIVE_SEED20260907_20261016",
"run/IPRLM336_FFN1232_ADDITIVE_SEED731946281_20261016"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 48.035,
"sample_sd": 0.26296783707011157,
"min": 47.74916666666667,
"max": 48.266666666666666,
"values": [
48.089166666666664,
48.266666666666666,
47.74916666666667
]
},
"five_axis": {
"mean": 50.57666666666667,
"sample_sd": 0.17097758137642574,
"min": 50.38,
"max": 50.69,
"values": [
50.38,
50.69,
50.66
]
},
"accuracy_mean": {
"blimp_filtered": 69.74666666666667,
"supplement_filtered": 58.403333333333336,
"ewok_filtered": 52.21,
"entity_tracking": 20.016666666666666,
"comps": 52.50666666666667,
"global_piqa_parallel": 22.653333333333332,
"global_piqa_nonparallel": 48.0
}
},
{
"family": "IPRLM352_FFN1232_ADDITIVE_SEED",
"seeds": [
137,
20260907,
731946281
],
"run_ids": [
"run/IPRLM352_FFN1232_ADDITIVE_SEED137_20261016",
"run/IPRLM352_FFN1232_ADDITIVE_SEED20260907_20261016",
"run/IPRLM352_FFN1232_ADDITIVE_SEED731946281_20261016"
],
"words_M": 40.0,
"scope": "same named family and matching declared architecture/core training; common age",
"six_axis": {
"mean": 47.36611111111111,
"sample_sd": 0.026644956440267906,
"min": 47.3425,
"max": 47.395,
"values": [
47.36083333333333,
47.3425,
47.395
]
},
"five_axis": {
"mean": 50.13466666666667,
"sample_sd": 0.12205463257629014,
"min": 50.0,
"max": 50.238,
"values": [
50.0,
50.166,
50.238
]
},
"accuracy_mean": {
"blimp_filtered": 68.46,
"supplement_filtered": 57.74,
"ewok_filtered": 52.233333333333334,
"entity_tracking": 19.89,
"comps": 52.35,
"global_piqa_parallel": 20.71333333333333,
"global_piqa_nonparallel": 46.333333333333336
}
}
]