label_space.json

{
  "alphabet": "extended",
  "labels": [
    "A",
    "B",
    "C",
    "D",
    "E",
    "F",
    "G",
    "H",
    "I",
    "J",
    "K",
    "L",
    "M",
    "N",
    "O",
    "P",
    "Q",
    "R",
    "S",
    "T",
    "U",
    "V",
    "W",
    "X",
    "Y",
    "Z",
    "a",
    "b",
    "c",
    "d",
    "e",
    "f",
    "g",
    "h",
    "i",
    "j",
    "k",
    "l",
    "m",
    "n",
    "o",
    "p",
    "q",
    "r",
    "s",
    "t",
    "u",
    "v",
    "w",
    "x",
    "y",
    "z",
    "0",
    "1",
    "2",
    "3",
    "4",
    "5",
    "6",
    "7",
    "8",
    "9",
    "α",
    "β",
    "γ",
    "δ",
    "ε",
    "ζ",
    "η",
    "θ",
    "ι",
    "κ",
    "λ",
    "μ",
    "ν",
    "ξ",
    "ο",
    "π",
    "ρ",
    "σ",
    "τ",
    "υ",
    "φ",
    "χ",
    "ψ",
    "ω",
    "Α",
    "Β",
    "Γ",
    "Δ",
    "Ε",
    "Ζ",
    "Η",
    "Θ",
    "Ι",
    "Κ",
    "Λ",
    "Μ",
    "Ν",
    "Ξ",
    "Ο",
    "Π",
    "Ρ",
    "Σ",
    "Τ",
    "Υ",
    "Φ",
    "Χ",
    "Ω",
    "а",
    "б",
    "в",
    "г",
    "д",
    "е",
    "ж",
    "з",
    "и",
    "й",
    "к",
    "л",
    "м",
    "н",
    "о",
    "п",
    "р",
    "с",
    "т",
    "у",
    "ф",
    "х",
    "ц",
    "ч",
    "ш",
    "щ",
    "ъ",
    "ы",
    "ь",
    "э",
    "ю",
    "я",
    "А",
    "Б",
    "В",
    "Г",
    "Д",
    "Е",
    "Ж",
    "З",
    "И",
    "Й",
    "К",
    "Л",
    "М",
    "Н",
    "О",
    "П",
    "Р",
    "С",
    "Т",
    "У",
    "Ф",
    "Х",
    "Ц",
    "Ч",
    "Ш",
    "Щ",
    "Ъ",
    "Ы",
    "Ь",
    "Э",
    "Ю",
    "Я"
  ],
  "token_ids": [
    32,
    33,
    34,
    35,
    36,
    37,
    38,
    39,
    40,
    41,
    42,
    43,
    44,
    45,
    46,
    47,
    48,
    49,
    50,
    51,
    52,
    53,
    54,
    55,
    56,
    57,
    64,
    65,
    66,
    67,
    68,
    69,
    70,
    71,
    72,
    73,
    74,
    75,
    76,
    77,
    78,
    79,
    80,
    81,
    82,
    83,
    84,
    85,
    86,
    87,
    88,
    89,
    15,
    16,
    17,
    18,
    19,
    20,
    21,
    22,
    23,
    24,
    18374,
    49531,
    57369,
    82435,
    29159,
    149047,
    40053,
    85491,
    28791,
    65065,
    32375,
    41700,
    32166,
    149112,
    26660,
    46636,
    36820,
    42473,
    34638,
    51664,
    82099,
    86035,
    151339,
    54968,
    153061,
    169054,
    168998,
    168977,
    168953,
    169417,
    158752,
    169091,
    153084,
    158743,
    169042,
    168964,
    169001,
    169749,
    154858,
    158740,
    158815,
    153065,
    168956,
    158808,
    169100,
    169086,
    169189,
    1424,
    9629,
    5301,
    14942,
    6733,
    1450,
    16467,
    8688,
    1739,
    11796,
    4640,
    2941,
    6240,
    2040,
    1403,
    7754,
    2115,
    2175,
    1729,
    3652,
    18768,
    10161,
    10064,
    5831,
    11802,
    13739,
    32482,
    4403,
    4669,
    65131,
    11577,
    4096,
    34960,
    58297,
    15729,
    35884,
    23355,
    53241,
    154849,
    34279,
    29189,
    150882,
    25497,
    61757,
    36736,
    19582,
    19736,
    16362,
    32392,
    18727,
    32868,
    39243,
    52337,
    150853,
    89602,
    70345,
    151311,
    158782,
    169736,
    150516,
    151348,
    89030,
    168959,
    82440
  ],
  "max_options": 173,
  "over_limit_policy": "drop",
  "tokenizer": "Qwen/Qwen3.5-4B"
}