pretrained_model / tokenizer_config.json

End of training

ea06fc0 verified over 1 year ago

397 Bytes

{
  "pad_token": "<pad>",
  "eos_token": "</s>",
  "bos_token": "<go>",
  "unk_token": "<unk>",
  "vocab": [
    "<pad>",
    "</s>",
    "<unk>",
    "<go>",
    "S",
    "O",
    "2",
    "n",
    "l",
    "F",
    "H",
    "C",
    "o",
    "5",
    "r",
    "s",
    "=",
    "6",
    "[",
    "N",
    "4",
    "c",
    "-",
    "3",
    ")",
    "#",
    "]",
    "B",
    "(",
    "1"
  ]
}

	{
	"pad_token": "<pad>",
	"eos_token": "</s>",
	"bos_token": "<go>",
	"unk_token": "<unk>",
	"vocab": [
	"<pad>",
	"</s>",
	"<unk>",
	"<go>",
	"S",
	"O",
	"2",
	"n",
	"l",
	"F",
	"H",
	"C",
	"o",
	"5",
	"r",
	"s",
	"=",
	"6",
	"[",
	"N",
	"4",
	"c",
	"-",
	"3",
	")",
	"#",
	"]",
	"B",
	"(",
	"1"
	]
	}