| { | |
| "generated_from": "experiments/diacritics_restorer/data/train.parquet", | |
| "min_count": 50, | |
| "allowed": { | |
| "у": [ | |
| "ү", | |
| "ө" | |
| ], | |
| "э": [ | |
| "ә" | |
| ], | |
| "a": [ | |
| "ә" | |
| ], | |
| "е": [ | |
| "ә", | |
| "ө" | |
| ], | |
| "e": [ | |
| "ә" | |
| ], | |
| "g": [ | |
| "ғ" | |
| ], | |
| "н": [ | |
| "ң" | |
| ], | |
| "x": [ | |
| "һ" | |
| ], | |
| "n": [ | |
| "ң" | |
| ], | |
| "H": [ | |
| "Һ", | |
| "һ" | |
| ], | |
| "г": [ | |
| "ғ" | |
| ], | |
| "s": [ | |
| "ҫ" | |
| ], | |
| "q": [ | |
| "ҡ" | |
| ], | |
| "х": [ | |
| "һ" | |
| ], | |
| "к": [ | |
| "ҡ" | |
| ], | |
| "о": [ | |
| "ө" | |
| ], | |
| "с": [ | |
| "ҫ" | |
| ], | |
| "з": [ | |
| "ҙ" | |
| ], | |
| "Э": [ | |
| "Ә" | |
| ], | |
| "z": [ | |
| "ҙ" | |
| ], | |
| "o": [ | |
| "ө" | |
| ], | |
| "а": [ | |
| "ә" | |
| ], | |
| "u": [ | |
| "ү" | |
| ], | |
| "k": [ | |
| "ҡ" | |
| ], | |
| "h": [ | |
| "һ" | |
| ], | |
| "Х": [ | |
| "Һ" | |
| ], | |
| "У": [ | |
| "Ү", | |
| "Ө" | |
| ], | |
| "О": [ | |
| "Ө" | |
| ], | |
| "Е": [ | |
| "Ә", | |
| "Ө" | |
| ], | |
| "К": [ | |
| "Ҡ" | |
| ], | |
| "G": [ | |
| "Ғ" | |
| ], | |
| "Q": [ | |
| "Ҡ" | |
| ], | |
| "Г": [ | |
| "Ғ" | |
| ], | |
| "E": [ | |
| "Ә" | |
| ], | |
| "А": [ | |
| "Ә" | |
| ], | |
| "З": [ | |
| "Ҙ" | |
| ], | |
| "X": [ | |
| "Һ" | |
| ], | |
| "K": [ | |
| "Ҡ" | |
| ], | |
| "U": [ | |
| "Ү" | |
| ], | |
| "A": [ | |
| "Ә" | |
| ], | |
| "O": [ | |
| "Ө" | |
| ], | |
| "Н": [ | |
| "Ң" | |
| ], | |
| "С": [ | |
| "Ҫ" | |
| ], | |
| "Z": [ | |
| "Ҙ" | |
| ], | |
| "N": [ | |
| "Ң" | |
| ], | |
| "S": [ | |
| "Ҫ" | |
| ] | |
| }, | |
| "counts": { | |
| "у": { | |
| "ү": 211522, | |
| "ө": 14560 | |
| }, | |
| "э": { | |
| "ә": 1029251 | |
| }, | |
| "a": { | |
| "ә": 49846 | |
| }, | |
| "е": { | |
| "ә": 49632, | |
| "ө": 14554 | |
| }, | |
| "e": { | |
| "ә": 49784 | |
| }, | |
| "g": { | |
| "ғ": 31057 | |
| }, | |
| "н": { | |
| "ң": 182526 | |
| }, | |
| "x": { | |
| "һ": 14751 | |
| }, | |
| "n": { | |
| "ң": 20553 | |
| }, | |
| "H": { | |
| "һ": 14758, | |
| "Һ": 806 | |
| }, | |
| "г": { | |
| "ғ": 272450 | |
| }, | |
| "s": { | |
| "ҫ": 6237 | |
| }, | |
| "q": { | |
| "ҡ": 31298 | |
| }, | |
| "х": { | |
| "һ": 246360 | |
| }, | |
| "к": { | |
| "ҡ": 398135 | |
| }, | |
| "о": { | |
| "ө": 243152 | |
| }, | |
| "с": { | |
| "ҫ": 55590 | |
| }, | |
| "з": { | |
| "ҙ": 384175 | |
| }, | |
| "Э": { | |
| "Ә": 18540 | |
| }, | |
| "z": { | |
| "ҙ": 43099 | |
| }, | |
| "o": { | |
| "ө": 14626 | |
| }, | |
| "а": { | |
| "ә": 49872 | |
| }, | |
| "u": { | |
| "ү": 23841 | |
| }, | |
| "k": { | |
| "ҡ": 31495 | |
| }, | |
| "h": { | |
| "һ": 14790 | |
| }, | |
| "Х": { | |
| "Һ": 10158 | |
| }, | |
| "У": { | |
| "Ү": 5624, | |
| "Ө": 370 | |
| }, | |
| "О": { | |
| "Ө": 6212 | |
| }, | |
| "Е": { | |
| "Ә": 879, | |
| "Ө": 395 | |
| }, | |
| "К": { | |
| "Ҡ": 21263 | |
| }, | |
| "G": { | |
| "Ғ": 762 | |
| }, | |
| "Q": { | |
| "Ҡ": 1619 | |
| }, | |
| "Г": { | |
| "Ғ": 6751 | |
| }, | |
| "E": { | |
| "Ә": 878 | |
| }, | |
| "А": { | |
| "Ә": 879 | |
| }, | |
| "З": { | |
| "Ҙ": 611 | |
| }, | |
| "X": { | |
| "Һ": 763 | |
| }, | |
| "K": { | |
| "Ҡ": 1654 | |
| }, | |
| "U": { | |
| "Ү": 625 | |
| }, | |
| "A": { | |
| "Ә": 922 | |
| }, | |
| "O": { | |
| "Ө": 359 | |
| }, | |
| "Н": { | |
| "Ң": 101 | |
| }, | |
| "С": { | |
| "Ҫ": 51 | |
| }, | |
| "Z": { | |
| "Ҙ": 60 | |
| }, | |
| "N": { | |
| "Ң": 20553 | |
| }, | |
| "S": { | |
| "Ҫ": 6237 | |
| } | |
| }, | |
| "skipped_length_mismatch": 0 | |
| } |