tokenizer_data.json

{
  "vocab": {
    "<PAD>": 0,
    "<UNK>": 1,
    "a1": 2,
    "a2": 3,
    "a3": 4,
    "a4": 5,
    "a5": 6,
    "a6": 7,
    "a7": 8,
    "a8": 9,
    "b1": 10,
    "b2": 11,
    "b3": 12,
    "b4": 13,
    "b5": 14,
    "b6": 15,
    "b7": 16,
    "b8": 17,
    "c1": 18,
    "c2": 19,
    "c3": 20,
    "c4": 21,
    "c5": 22,
    "c6": 23,
    "c7": 24,
    "c8": 25,
    "d1": 26,
    "d2": 27,
    "d3": 28,
    "d4": 29,
    "d5": 30,
    "d6": 31,
    "d7": 32,
    "d8": 33,
    "e1": 34,
    "e2": 35,
    "e3": 36,
    "e4": 37,
    "e5": 38,
    "e6": 39,
    "e7": 40,
    "e8": 41,
    "f1": 42,
    "f2": 43,
    "f3": 44,
    "f4": 45,
    "f5": 46,
    "f6": 47,
    "f7": 48,
    "f8": 49,
    "g1": 50,
    "g2": 51,
    "g3": 52,
    "g4": 53,
    "g5": 54,
    "g6": 55,
    "g7": 56,
    "g8": 57,
    "h1": 58,
    "h2": 59,
    "h3": 60,
    "h4": 61,
    "h5": 62,
    "h6": 63,
    "h7": 64,
    "h8": 65,
    "1": 66,
    ".": 67,
    " ": 68,
    "2": 69,
    "N": 70,
    "3": 71,
    "c": 72,
    "x": 73,
    "4": 74,
    "5": 75,
    "B": 76,
    "6": 77,
    "7": 78,
    "8": 79,
    "b": 80,
    "9": 81,
    "0": 82,
    "e": 83,
    "O": 84,
    "-": 85,
    "Q": 86,
    "R": 87,
    "f": 88,
    "a": 89,
    "d": 90,
    "K": 91,
    "g": 92,
    "+": 93,
    "#": 94,
    "h": 95,
    "=": 96,
    "/": 97
  },
  "ids_to_tokens": {
    "0": "<PAD>",
    "1": "<UNK>",
    "2": "a1",
    "3": "a2",
    "4": "a3",
    "5": "a4",
    "6": "a5",
    "7": "a6",
    "8": "a7",
    "9": "a8",
    "10": "b1",
    "11": "b2",
    "12": "b3",
    "13": "b4",
    "14": "b5",
    "15": "b6",
    "16": "b7",
    "17": "b8",
    "18": "c1",
    "19": "c2",
    "20": "c3",
    "21": "c4",
    "22": "c5",
    "23": "c6",
    "24": "c7",
    "25": "c8",
    "26": "d1",
    "27": "d2",
    "28": "d3",
    "29": "d4",
    "30": "d5",
    "31": "d6",
    "32": "d7",
    "33": "d8",
    "34": "e1",
    "35": "e2",
    "36": "e3",
    "37": "e4",
    "38": "e5",
    "39": "e6",
    "40": "e7",
    "41": "e8",
    "42": "f1",
    "43": "f2",
    "44": "f3",
    "45": "f4",
    "46": "f5",
    "47": "f6",
    "48": "f7",
    "49": "f8",
    "50": "g1",
    "51": "g2",
    "52": "g3",
    "53": "g4",
    "54": "g5",
    "55": "g6",
    "56": "g7",
    "57": "g8",
    "58": "h1",
    "59": "h2",
    "60": "h3",
    "61": "h4",
    "62": "h5",
    "63": "h6",
    "64": "h7",
    "65": "h8",
    "66": "1",
    "67": ".",
    "68": " ",
    "69": "2",
    "70": "N",
    "71": "3",
    "72": "c",
    "73": "x",
    "74": "4",
    "75": "5",
    "76": "B",
    "77": "6",
    "78": "7",
    "79": "8",
    "80": "b",
    "81": "9",
    "82": "0",
    "83": "e",
    "84": "O",
    "85": "-",
    "86": "Q",
    "87": "R",
    "88": "f",
    "89": "a",
    "90": "d",
    "91": "K",
    "92": "g",
    "93": "+",
    "94": "#",
    "95": "h",
    "96": "=",
    "97": "/"
  },
  "next_id": 98
}