[ { "family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.67611111111111, "sample_sd": 0.47755913925029597, "min": 47.30833333333333, "max": 48.215833333333336, "values": [ 47.30833333333333, 48.215833333333336, 47.50416666666667 ] }, "five_axis": { "mean": 49.91733333333333, "sample_sd": 0.06664332924857254, "min": 49.846, "max": 49.978, "values": [ 49.928, 49.846, 49.978 ] }, "accuracy_mean": { "blimp_filtered": 68.75333333333333, "supplement_filtered": 57.97, "ewok_filtered": 51.156666666666666, "entity_tracking": 19.536666666666665, "comps": 52.17, "global_piqa_parallel": 24.273333333333333, "global_piqa_nonparallel": 48.666666666666664 } }, { "family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014" ], "words_M": 70.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 48.708888888888886, "sample_sd": 0.10405104694509736, "min": 48.589166666666664, "max": 48.7775, "values": [ 48.76, 48.7775, 48.589166666666664 ] }, "five_axis": { "mean": 51.054, "sample_sd": 0.11677328461596252, "min": 50.974, "max": 51.188, "values": [ 51.188, 51.0, 50.974 ] }, "accuracy_mean": { "blimp_filtered": 70.17333333333333, "supplement_filtered": 59.23, "ewok_filtered": 51.49666666666667, "entity_tracking": 22.01, "comps": 52.36, "global_piqa_parallel": 23.299999999999997, "global_piqa_nonparallel": 50.666666666666664 } }, { "family": "IPRLM320_FFN_ADDITIVE_BYPASS_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED137_20261015", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED20260907_20261014", "run/IPRLM320_FFN_ADDITIVE_BYPASS_SEED731946281_20261014" ], "words_M": 80.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 49.047222222222224, "sample_sd": 0.1868866511294198, "min": 48.840833333333336, "max": 49.205, "values": [ 48.840833333333336, 49.09583333333333, 49.205 ] }, "five_axis": { "mean": 51.187333333333335, "sample_sd": 0.17406129188689004, "min": 51.016, "max": 51.364, "values": [ 51.364, 51.182, 51.016 ] }, "accuracy_mean": { "blimp_filtered": 69.32, "supplement_filtered": 60.71333333333333, "ewok_filtered": 51.98, "entity_tracking": 21.506666666666668, "comps": 52.416666666666664, "global_piqa_parallel": 21.36, "global_piqa_nonparallel": 55.333333333333336 } }, { "family": "IPRLM320_FFN_CONDITIONAL_BYPASS_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED137_20261015", "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED20260907_20261015", "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED731946281_20261015" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.531666666666666, "sample_sd": 0.35446066229006207, "min": 47.16916666666667, "max": 47.8775, "values": [ 47.54833333333333, 47.8775, 47.16916666666667 ] }, "five_axis": { "mean": 50.16866666666667, "sample_sd": 0.3756398984843482, "min": 49.77, "max": 50.516, "values": [ 50.516, 50.22, 49.77 ] }, "accuracy_mean": { "blimp_filtered": 68.76, "supplement_filtered": 57.20333333333333, "ewok_filtered": 52.266666666666666, "entity_tracking": 20.486666666666665, "comps": 52.126666666666665, "global_piqa_parallel": 21.36, "global_piqa_nonparallel": 47.333333333333336 } }, { "family": "IPRLM320_FFN_CONDITIONAL_BYPASS_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED137_20261015", "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED20260907_20261015", "run/IPRLM320_FFN_CONDITIONAL_BYPASS_SEED731946281_20261015" ], "words_M": 70.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 48.24944444444444, "sample_sd": 0.2663100914625932, "min": 47.945, "max": 48.439166666666665, "values": [ 48.439166666666665, 48.36416666666667, 47.945 ] }, "five_axis": { "mean": 50.69466666666666, "sample_sd": 0.16753905017437926, "min": 50.592, "max": 50.888, "values": [ 50.888, 50.604, 50.592 ] }, "accuracy_mean": { "blimp_filtered": 69.52333333333333, "supplement_filtered": 58.193333333333335, "ewok_filtered": 52.35333333333333, "entity_tracking": 20.97, "comps": 52.43333333333333, "global_piqa_parallel": 20.713333333333335, "global_piqa_nonparallel": 51.333333333333336 } }, { "family": "IPRLM320_FFN_G_RMS_SEED", "seeds": [ 20260907, 731946281 ], "run_ids": [ "run/IPRLM320_FFN_G_RMS_SEED20260907_20261014", "run/IPRLM320_FFN_G_RMS_SEED731946281_20261014" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.973333333333336, "sample_sd": 0.06717514421272121, "min": 47.92583333333334, "max": 48.020833333333336, "values": [ 47.92583333333334, 48.020833333333336 ] }, "five_axis": { "mean": 50.135, "sample_sd": 0.19374725804511467, "min": 49.998, "max": 50.272, "values": [ 50.272, 49.998 ] }, "accuracy_mean": { "blimp_filtered": 69.46000000000001, "supplement_filtered": 57.64, "ewok_filtered": 51.370000000000005, "entity_tracking": 19.845, "comps": 52.36, "global_piqa_parallel": 22.33, "global_piqa_nonparallel": 52.0 } }, { "family": "IPRLM336_FFN1120_ADDITIVE_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM336_FFN1120_ADDITIVE_SEED137_20261016", "run/IPRLM336_FFN1120_ADDITIVE_SEED20260907_20261016", "run/IPRLM336_FFN1120_ADDITIVE_SEED731946281_20261016" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.596666666666664, "sample_sd": 0.41533871719357096, "min": 47.119166666666665, "max": 47.87416666666667, "values": [ 47.119166666666665, 47.79666666666667, 47.87416666666667 ] }, "five_axis": { "mean": 50.04666666666667, "sample_sd": 0.3194265695482005, "min": 49.81, "max": 50.41, "values": [ 49.81, 49.92, 50.41 ] }, "accuracy_mean": { "blimp_filtered": 68.58666666666667, "supplement_filtered": 57.77, "ewok_filtered": 51.166666666666664, "entity_tracking": 20.60333333333333, "comps": 52.10666666666667, "global_piqa_parallel": 21.36, "global_piqa_nonparallel": 49.333333333333336 } }, { "family": "IPRLM336_FFN1176_ADDITIVE_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM336_FFN1176_ADDITIVE_SEED137_20261016", "run/IPRLM336_FFN1176_ADDITIVE_SEED20260907_20261016", "run/IPRLM336_FFN1176_ADDITIVE_SEED731946281_20261016" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.8575, "sample_sd": 0.4016709889117376, "min": 47.43083333333333, "max": 48.22833333333333, "values": [ 47.43083333333333, 48.22833333333333, 47.913333333333334 ] }, "five_axis": { "mean": 50.36066666666667, "sample_sd": 0.6009137486639292, "min": 49.684, "max": 50.832, "values": [ 49.684, 50.832, 50.566 ] }, "accuracy_mean": { "blimp_filtered": 69.02666666666667, "supplement_filtered": 58.06, "ewok_filtered": 52.39, "entity_tracking": 20.12, "comps": 52.20666666666666, "global_piqa_parallel": 21.683333333333334, "global_piqa_nonparallel": 49.0 } }, { "family": "IPRLM336_FFN1232_ADDITIVE_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM336_FFN1232_ADDITIVE_SEED137_20261016", "run/IPRLM336_FFN1232_ADDITIVE_SEED20260907_20261016", "run/IPRLM336_FFN1232_ADDITIVE_SEED731946281_20261016" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 48.035, "sample_sd": 0.26296783707011157, "min": 47.74916666666667, "max": 48.266666666666666, "values": [ 48.089166666666664, 48.266666666666666, 47.74916666666667 ] }, "five_axis": { "mean": 50.57666666666667, "sample_sd": 0.17097758137642574, "min": 50.38, "max": 50.69, "values": [ 50.38, 50.69, 50.66 ] }, "accuracy_mean": { "blimp_filtered": 69.74666666666667, "supplement_filtered": 58.403333333333336, "ewok_filtered": 52.21, "entity_tracking": 20.016666666666666, "comps": 52.50666666666667, "global_piqa_parallel": 22.653333333333332, "global_piqa_nonparallel": 48.0 } }, { "family": "IPRLM352_FFN1232_ADDITIVE_SEED", "seeds": [ 137, 20260907, 731946281 ], "run_ids": [ "run/IPRLM352_FFN1232_ADDITIVE_SEED137_20261016", "run/IPRLM352_FFN1232_ADDITIVE_SEED20260907_20261016", "run/IPRLM352_FFN1232_ADDITIVE_SEED731946281_20261016" ], "words_M": 40.0, "scope": "same named family and matching declared architecture/core training; common age", "six_axis": { "mean": 47.36611111111111, "sample_sd": 0.026644956440267906, "min": 47.3425, "max": 47.395, "values": [ 47.36083333333333, 47.3425, 47.395 ] }, "five_axis": { "mean": 50.13466666666667, "sample_sd": 0.12205463257629014, "min": 50.0, "max": 50.238, "values": [ 50.0, 50.166, 50.238 ] }, "accuracy_mean": { "blimp_filtered": 68.46, "supplement_filtered": 57.74, "ewok_filtered": 52.233333333333334, "entity_tracking": 19.89, "comps": 52.35, "global_piqa_parallel": 20.71333333333333, "global_piqa_nonparallel": 46.333333333333336 } } ]