| { |
| "checkpoint_sha256": "3d8cca87e383731b653aa4212dfe0f242bb58efa03d44dcc09a50b89bf6d7949", |
| "tokenizer_sha256": "285c9629a44871f6822453f7a5559b3f46c6b5b643310868035b640564475250", |
| "seed": 1945, |
| "historical_test": { |
| "tokens": 239359, |
| "nll": 3.2762069157486806, |
| "perplexity": 26.47515949279596, |
| "bytes": 1190148, |
| "bits_per_byte": 0.9505930885217402 |
| }, |
| "modern_control": { |
| "tokens": 306830, |
| "nll": 3.5546438023587372, |
| "perplexity": 34.97535960805526, |
| "bytes": 1019052, |
| "bits_per_byte": 1.5440881910342503 |
| }, |
| "historical_bpb_lower_than_modern": true, |
| "generations": [ |
| { |
| "prompt": "文明開化とは", |
| "text": "文明開化とは全く別物で、我國で西洋諸國の文明開化を學んだのぢやといふ說も有るさうぢやが、これは餘程間違つた話で、現在の我國が文明開化の國と成つたのは、種々の原因があらう。其の重な原因の一つは維新以來泰西の文明を輸入したからであるが、維新以後輸入した西洋の文明は、皆外國人の造つたものばかりで、自分の國で造つたものは極めて稀れである。其の最も著しい例は、維新前には、西洋の文明を輸入することを努めずして、專ら自國の開化を輸入し自國の開化を輸入した例は少々ではない。彼の安政の元年に", |
| "nonempty": true, |
| "no_mojibake": true, |
| "repetition_rate": 0.008620689655172376, |
| "finite_repetition": true |
| }, |
| { |
| "prompt": "昭和十年の東京では", |
| "text": "昭和十年の東京では此の弊害は少しもない、又將來も恐らくなからうと云ふことでありますが、是が若し出來るとすれば何處にでも出來るのです、今迄の東京市の中では市區改正の方法に依て出來易い方で、或は又現在の電氣局の如きに於ても出來易い所もあり、或は出來難い所もある、それが爲に困難をして居る所が澤山あるのであります、此點に付てどうか御審議を願ひたいと思ひます。○三十七番(渡邊幸太郞君)此の問題は愼重に考慮したいと思ひますが、唯我々としては一つ二つ申上げて置きたいと思ふのは、どう云ふ場合に行政廳が行政廳の權限を越えて行政廳の權限內でやることは出來ないか、之を", |
| "nonempty": true, |
| "no_mojibake": true, |
| "repetition_rate": 0.0, |
| "finite_repetition": true |
| }, |
| { |
| "prompt": "吾輩は", |
| "text": "吾輩は寧ろ斯の如きことには少しも頓着せぬ方であていつに念信相正の者信敬-187-\nります。(拍手)諸君の中には、今日に於ては殊に反對論者ありと雖も、是はどう云ふことであるかと云ふと、大體育勅語と聖勅とは何處が違ふかと云ふ議論があるのであります。育勅語には『父母ニ孝ニ兄弟ニ友ニ夫婦相和シ』と仰せられてある。聖勅には『朋友相信シ恭儉已レヲ持シ博愛衆ニ及ホシ學ヲ修メ業ヲ習ヒ以テ智能ヲ啓發シ德器ヲ成就シ』とあります。而して聖", |
| "nonempty": true, |
| "no_mojibake": true, |
| "repetition_rate": 0.0, |
| "finite_repetition": true |
| }, |
| { |
| "prompt": "人工知能とは", |
| "text": "人工知能とは比較的に平易に云ひ得るものである。之をよく知るためには兒童が學習した學習の結果を直接に記述し、その學習過程を具體的に示す必要がある。學習過程を精密に記載するには一には各兒童の學習の過程を調査しその表を作らねばならぬ。二には兒童の學習過程を記憶表或は兒童學業一覽等によつて調査し、これによつて兒童の學習過程を時間的に系統的に記述するを要する。この種の調査は兒童が學習したその過程を記載することを目的とするのであるから、兒童が學習の際に見聞し觀察したことを自由に記述することが出來なければ精確な結果を得ることが出來ない。學習過程を", |
| "nonempty": true, |
| "no_mojibake": true, |
| "repetition_rate": 0.007633587786259555, |
| "finite_repetition": true |
| }, |
| { |
| "prompt": "國家の將來は", |
| "text": "國家の將來は恐るべき狀態に到來するであらう。將來の大和民族は將來の世界的大和民族としてその文化を開發し、その地位を確立し、その文化を向上し、將來の世界的大和民族としてその使命を果すやうにせねばならぬ。斯くして初めて日本精神は日本民族そのものとなつて世界を指導するに足るのである。世界は玆に始めて文明的にその使命を達成し、人類の理想を實現し得るに至るのである。若し日本精神を忘れて徒らに排他的になれば、日本民族は世界から離れ去り、その存在をも危ふくするに至るであらう。世界の平和は斯くして遂に望み得られぬであらう。日本精神とは何ぞや-日本精神とは何ぞやと云ふ問に對して答へるには、日本精神", |
| "nonempty": true, |
| "no_mojibake": true, |
| "repetition_rate": 0.034965034965035, |
| "finite_repetition": true |
| } |
| ], |
| "automatic_rubric_pass_rate": 1.0 |
| } |
|
|
