1067 lines
20 KiB
JSON
1067 lines
20 KiB
JSON
|
|
{
|
||
|
|
"additional_special_tokens": [
|
||
|
|
"<|IMAGE_PLACEHOLDER|>",
|
||
|
|
"<|AUDIO_PLACEHOLDER|>",
|
||
|
|
"<|LOC_0|>",
|
||
|
|
"<|LOC_1|>",
|
||
|
|
"<|LOC_2|>",
|
||
|
|
"<|LOC_3|>",
|
||
|
|
"<|LOC_4|>",
|
||
|
|
"<|LOC_5|>",
|
||
|
|
"<|LOC_6|>",
|
||
|
|
"<|LOC_7|>",
|
||
|
|
"<|LOC_8|>",
|
||
|
|
"<|LOC_9|>",
|
||
|
|
"<|LOC_10|>",
|
||
|
|
"<|LOC_11|>",
|
||
|
|
"<|LOC_12|>",
|
||
|
|
"<|LOC_13|>",
|
||
|
|
"<|LOC_14|>",
|
||
|
|
"<|LOC_15|>",
|
||
|
|
"<|LOC_16|>",
|
||
|
|
"<|LOC_17|>",
|
||
|
|
"<|LOC_18|>",
|
||
|
|
"<|LOC_19|>",
|
||
|
|
"<|LOC_20|>",
|
||
|
|
"<|LOC_21|>",
|
||
|
|
"<|LOC_22|>",
|
||
|
|
"<|LOC_23|>",
|
||
|
|
"<|LOC_24|>",
|
||
|
|
"<|LOC_25|>",
|
||
|
|
"<|LOC_26|>",
|
||
|
|
"<|LOC_27|>",
|
||
|
|
"<|LOC_28|>",
|
||
|
|
"<|LOC_29|>",
|
||
|
|
"<|LOC_30|>",
|
||
|
|
"<|LOC_31|>",
|
||
|
|
"<|LOC_32|>",
|
||
|
|
"<|LOC_33|>",
|
||
|
|
"<|LOC_34|>",
|
||
|
|
"<|LOC_35|>",
|
||
|
|
"<|LOC_36|>",
|
||
|
|
"<|LOC_37|>",
|
||
|
|
"<|LOC_38|>",
|
||
|
|
"<|LOC_39|>",
|
||
|
|
"<|LOC_40|>",
|
||
|
|
"<|LOC_41|>",
|
||
|
|
"<|LOC_42|>",
|
||
|
|
"<|LOC_43|>",
|
||
|
|
"<|LOC_44|>",
|
||
|
|
"<|LOC_45|>",
|
||
|
|
"<|LOC_46|>",
|
||
|
|
"<|LOC_47|>",
|
||
|
|
"<|LOC_48|>",
|
||
|
|
"<|LOC_49|>",
|
||
|
|
"<|LOC_50|>",
|
||
|
|
"<|LOC_51|>",
|
||
|
|
"<|LOC_52|>",
|
||
|
|
"<|LOC_53|>",
|
||
|
|
"<|LOC_54|>",
|
||
|
|
"<|LOC_55|>",
|
||
|
|
"<|LOC_56|>",
|
||
|
|
"<|LOC_57|>",
|
||
|
|
"<|LOC_58|>",
|
||
|
|
"<|LOC_59|>",
|
||
|
|
"<|LOC_60|>",
|
||
|
|
"<|LOC_61|>",
|
||
|
|
"<|LOC_62|>",
|
||
|
|
"<|LOC_63|>",
|
||
|
|
"<|LOC_64|>",
|
||
|
|
"<|LOC_65|>",
|
||
|
|
"<|LOC_66|>",
|
||
|
|
"<|LOC_67|>",
|
||
|
|
"<|LOC_68|>",
|
||
|
|
"<|LOC_69|>",
|
||
|
|
"<|LOC_70|>",
|
||
|
|
"<|LOC_71|>",
|
||
|
|
"<|LOC_72|>",
|
||
|
|
"<|LOC_73|>",
|
||
|
|
"<|LOC_74|>",
|
||
|
|
"<|LOC_75|>",
|
||
|
|
"<|LOC_76|>",
|
||
|
|
"<|LOC_77|>",
|
||
|
|
"<|LOC_78|>",
|
||
|
|
"<|LOC_79|>",
|
||
|
|
"<|LOC_80|>",
|
||
|
|
"<|LOC_81|>",
|
||
|
|
"<|LOC_82|>",
|
||
|
|
"<|LOC_83|>",
|
||
|
|
"<|LOC_84|>",
|
||
|
|
"<|LOC_85|>",
|
||
|
|
"<|LOC_86|>",
|
||
|
|
"<|LOC_87|>",
|
||
|
|
"<|LOC_88|>",
|
||
|
|
"<|LOC_89|>",
|
||
|
|
"<|LOC_90|>",
|
||
|
|
"<|LOC_91|>",
|
||
|
|
"<|LOC_92|>",
|
||
|
|
"<|LOC_93|>",
|
||
|
|
"<|LOC_94|>",
|
||
|
|
"<|LOC_95|>",
|
||
|
|
"<|LOC_96|>",
|
||
|
|
"<|LOC_97|>",
|
||
|
|
"<|LOC_98|>",
|
||
|
|
"<|LOC_99|>",
|
||
|
|
"<|LOC_100|>",
|
||
|
|
"<|LOC_101|>",
|
||
|
|
"<|LOC_102|>",
|
||
|
|
"<|LOC_103|>",
|
||
|
|
"<|LOC_104|>",
|
||
|
|
"<|LOC_105|>",
|
||
|
|
"<|LOC_106|>",
|
||
|
|
"<|LOC_107|>",
|
||
|
|
"<|LOC_108|>",
|
||
|
|
"<|LOC_109|>",
|
||
|
|
"<|LOC_110|>",
|
||
|
|
"<|LOC_111|>",
|
||
|
|
"<|LOC_112|>",
|
||
|
|
"<|LOC_113|>",
|
||
|
|
"<|LOC_114|>",
|
||
|
|
"<|LOC_115|>",
|
||
|
|
"<|LOC_116|>",
|
||
|
|
"<|LOC_117|>",
|
||
|
|
"<|LOC_118|>",
|
||
|
|
"<|LOC_119|>",
|
||
|
|
"<|LOC_120|>",
|
||
|
|
"<|LOC_121|>",
|
||
|
|
"<|LOC_122|>",
|
||
|
|
"<|LOC_123|>",
|
||
|
|
"<|LOC_124|>",
|
||
|
|
"<|LOC_125|>",
|
||
|
|
"<|LOC_126|>",
|
||
|
|
"<|LOC_127|>",
|
||
|
|
"<|LOC_128|>",
|
||
|
|
"<|LOC_129|>",
|
||
|
|
"<|LOC_130|>",
|
||
|
|
"<|LOC_131|>",
|
||
|
|
"<|LOC_132|>",
|
||
|
|
"<|LOC_133|>",
|
||
|
|
"<|LOC_134|>",
|
||
|
|
"<|LOC_135|>",
|
||
|
|
"<|LOC_136|>",
|
||
|
|
"<|LOC_137|>",
|
||
|
|
"<|LOC_138|>",
|
||
|
|
"<|LOC_139|>",
|
||
|
|
"<|LOC_140|>",
|
||
|
|
"<|LOC_141|>",
|
||
|
|
"<|LOC_142|>",
|
||
|
|
"<|LOC_143|>",
|
||
|
|
"<|LOC_144|>",
|
||
|
|
"<|LOC_145|>",
|
||
|
|
"<|LOC_146|>",
|
||
|
|
"<|LOC_147|>",
|
||
|
|
"<|LOC_148|>",
|
||
|
|
"<|LOC_149|>",
|
||
|
|
"<|LOC_150|>",
|
||
|
|
"<|LOC_151|>",
|
||
|
|
"<|LOC_152|>",
|
||
|
|
"<|LOC_153|>",
|
||
|
|
"<|LOC_154|>",
|
||
|
|
"<|LOC_155|>",
|
||
|
|
"<|LOC_156|>",
|
||
|
|
"<|LOC_157|>",
|
||
|
|
"<|LOC_158|>",
|
||
|
|
"<|LOC_159|>",
|
||
|
|
"<|LOC_160|>",
|
||
|
|
"<|LOC_161|>",
|
||
|
|
"<|LOC_162|>",
|
||
|
|
"<|LOC_163|>",
|
||
|
|
"<|LOC_164|>",
|
||
|
|
"<|LOC_165|>",
|
||
|
|
"<|LOC_166|>",
|
||
|
|
"<|LOC_167|>",
|
||
|
|
"<|LOC_168|>",
|
||
|
|
"<|LOC_169|>",
|
||
|
|
"<|LOC_170|>",
|
||
|
|
"<|LOC_171|>",
|
||
|
|
"<|LOC_172|>",
|
||
|
|
"<|LOC_173|>",
|
||
|
|
"<|LOC_174|>",
|
||
|
|
"<|LOC_175|>",
|
||
|
|
"<|LOC_176|>",
|
||
|
|
"<|LOC_177|>",
|
||
|
|
"<|LOC_178|>",
|
||
|
|
"<|LOC_179|>",
|
||
|
|
"<|LOC_180|>",
|
||
|
|
"<|LOC_181|>",
|
||
|
|
"<|LOC_182|>",
|
||
|
|
"<|LOC_183|>",
|
||
|
|
"<|LOC_184|>",
|
||
|
|
"<|LOC_185|>",
|
||
|
|
"<|LOC_186|>",
|
||
|
|
"<|LOC_187|>",
|
||
|
|
"<|LOC_188|>",
|
||
|
|
"<|LOC_189|>",
|
||
|
|
"<|LOC_190|>",
|
||
|
|
"<|LOC_191|>",
|
||
|
|
"<|LOC_192|>",
|
||
|
|
"<|LOC_193|>",
|
||
|
|
"<|LOC_194|>",
|
||
|
|
"<|LOC_195|>",
|
||
|
|
"<|LOC_196|>",
|
||
|
|
"<|LOC_197|>",
|
||
|
|
"<|LOC_198|>",
|
||
|
|
"<|LOC_199|>",
|
||
|
|
"<|LOC_200|>",
|
||
|
|
"<|LOC_201|>",
|
||
|
|
"<|LOC_202|>",
|
||
|
|
"<|LOC_203|>",
|
||
|
|
"<|LOC_204|>",
|
||
|
|
"<|LOC_205|>",
|
||
|
|
"<|LOC_206|>",
|
||
|
|
"<|LOC_207|>",
|
||
|
|
"<|LOC_208|>",
|
||
|
|
"<|LOC_209|>",
|
||
|
|
"<|LOC_210|>",
|
||
|
|
"<|LOC_211|>",
|
||
|
|
"<|LOC_212|>",
|
||
|
|
"<|LOC_213|>",
|
||
|
|
"<|LOC_214|>",
|
||
|
|
"<|LOC_215|>",
|
||
|
|
"<|LOC_216|>",
|
||
|
|
"<|LOC_217|>",
|
||
|
|
"<|LOC_218|>",
|
||
|
|
"<|LOC_219|>",
|
||
|
|
"<|LOC_220|>",
|
||
|
|
"<|LOC_221|>",
|
||
|
|
"<|LOC_222|>",
|
||
|
|
"<|LOC_223|>",
|
||
|
|
"<|LOC_224|>",
|
||
|
|
"<|LOC_225|>",
|
||
|
|
"<|LOC_226|>",
|
||
|
|
"<|LOC_227|>",
|
||
|
|
"<|LOC_228|>",
|
||
|
|
"<|LOC_229|>",
|
||
|
|
"<|LOC_230|>",
|
||
|
|
"<|LOC_231|>",
|
||
|
|
"<|LOC_232|>",
|
||
|
|
"<|LOC_233|>",
|
||
|
|
"<|LOC_234|>",
|
||
|
|
"<|LOC_235|>",
|
||
|
|
"<|LOC_236|>",
|
||
|
|
"<|LOC_237|>",
|
||
|
|
"<|LOC_238|>",
|
||
|
|
"<|LOC_239|>",
|
||
|
|
"<|LOC_240|>",
|
||
|
|
"<|LOC_241|>",
|
||
|
|
"<|LOC_242|>",
|
||
|
|
"<|LOC_243|>",
|
||
|
|
"<|LOC_244|>",
|
||
|
|
"<|LOC_245|>",
|
||
|
|
"<|LOC_246|>",
|
||
|
|
"<|LOC_247|>",
|
||
|
|
"<|LOC_248|>",
|
||
|
|
"<|LOC_249|>",
|
||
|
|
"<|LOC_250|>",
|
||
|
|
"<|LOC_251|>",
|
||
|
|
"<|LOC_252|>",
|
||
|
|
"<|LOC_253|>",
|
||
|
|
"<|LOC_254|>",
|
||
|
|
"<|LOC_255|>",
|
||
|
|
"<|LOC_256|>",
|
||
|
|
"<|LOC_257|>",
|
||
|
|
"<|LOC_258|>",
|
||
|
|
"<|LOC_259|>",
|
||
|
|
"<|LOC_260|>",
|
||
|
|
"<|LOC_261|>",
|
||
|
|
"<|LOC_262|>",
|
||
|
|
"<|LOC_263|>",
|
||
|
|
"<|LOC_264|>",
|
||
|
|
"<|LOC_265|>",
|
||
|
|
"<|LOC_266|>",
|
||
|
|
"<|LOC_267|>",
|
||
|
|
"<|LOC_268|>",
|
||
|
|
"<|LOC_269|>",
|
||
|
|
"<|LOC_270|>",
|
||
|
|
"<|LOC_271|>",
|
||
|
|
"<|LOC_272|>",
|
||
|
|
"<|LOC_273|>",
|
||
|
|
"<|LOC_274|>",
|
||
|
|
"<|LOC_275|>",
|
||
|
|
"<|LOC_276|>",
|
||
|
|
"<|LOC_277|>",
|
||
|
|
"<|LOC_278|>",
|
||
|
|
"<|LOC_279|>",
|
||
|
|
"<|LOC_280|>",
|
||
|
|
"<|LOC_281|>",
|
||
|
|
"<|LOC_282|>",
|
||
|
|
"<|LOC_283|>",
|
||
|
|
"<|LOC_284|>",
|
||
|
|
"<|LOC_285|>",
|
||
|
|
"<|LOC_286|>",
|
||
|
|
"<|LOC_287|>",
|
||
|
|
"<|LOC_288|>",
|
||
|
|
"<|LOC_289|>",
|
||
|
|
"<|LOC_290|>",
|
||
|
|
"<|LOC_291|>",
|
||
|
|
"<|LOC_292|>",
|
||
|
|
"<|LOC_293|>",
|
||
|
|
"<|LOC_294|>",
|
||
|
|
"<|LOC_295|>",
|
||
|
|
"<|LOC_296|>",
|
||
|
|
"<|LOC_297|>",
|
||
|
|
"<|LOC_298|>",
|
||
|
|
"<|LOC_299|>",
|
||
|
|
"<|LOC_300|>",
|
||
|
|
"<|LOC_301|>",
|
||
|
|
"<|LOC_302|>",
|
||
|
|
"<|LOC_303|>",
|
||
|
|
"<|LOC_304|>",
|
||
|
|
"<|LOC_305|>",
|
||
|
|
"<|LOC_306|>",
|
||
|
|
"<|LOC_307|>",
|
||
|
|
"<|LOC_308|>",
|
||
|
|
"<|LOC_309|>",
|
||
|
|
"<|LOC_310|>",
|
||
|
|
"<|LOC_311|>",
|
||
|
|
"<|LOC_312|>",
|
||
|
|
"<|LOC_313|>",
|
||
|
|
"<|LOC_314|>",
|
||
|
|
"<|LOC_315|>",
|
||
|
|
"<|LOC_316|>",
|
||
|
|
"<|LOC_317|>",
|
||
|
|
"<|LOC_318|>",
|
||
|
|
"<|LOC_319|>",
|
||
|
|
"<|LOC_320|>",
|
||
|
|
"<|LOC_321|>",
|
||
|
|
"<|LOC_322|>",
|
||
|
|
"<|LOC_323|>",
|
||
|
|
"<|LOC_324|>",
|
||
|
|
"<|LOC_325|>",
|
||
|
|
"<|LOC_326|>",
|
||
|
|
"<|LOC_327|>",
|
||
|
|
"<|LOC_328|>",
|
||
|
|
"<|LOC_329|>",
|
||
|
|
"<|LOC_330|>",
|
||
|
|
"<|LOC_331|>",
|
||
|
|
"<|LOC_332|>",
|
||
|
|
"<|LOC_333|>",
|
||
|
|
"<|LOC_334|>",
|
||
|
|
"<|LOC_335|>",
|
||
|
|
"<|LOC_336|>",
|
||
|
|
"<|LOC_337|>",
|
||
|
|
"<|LOC_338|>",
|
||
|
|
"<|LOC_339|>",
|
||
|
|
"<|LOC_340|>",
|
||
|
|
"<|LOC_341|>",
|
||
|
|
"<|LOC_342|>",
|
||
|
|
"<|LOC_343|>",
|
||
|
|
"<|LOC_344|>",
|
||
|
|
"<|LOC_345|>",
|
||
|
|
"<|LOC_346|>",
|
||
|
|
"<|LOC_347|>",
|
||
|
|
"<|LOC_348|>",
|
||
|
|
"<|LOC_349|>",
|
||
|
|
"<|LOC_350|>",
|
||
|
|
"<|LOC_351|>",
|
||
|
|
"<|LOC_352|>",
|
||
|
|
"<|LOC_353|>",
|
||
|
|
"<|LOC_354|>",
|
||
|
|
"<|LOC_355|>",
|
||
|
|
"<|LOC_356|>",
|
||
|
|
"<|LOC_357|>",
|
||
|
|
"<|LOC_358|>",
|
||
|
|
"<|LOC_359|>",
|
||
|
|
"<|LOC_360|>",
|
||
|
|
"<|LOC_361|>",
|
||
|
|
"<|LOC_362|>",
|
||
|
|
"<|LOC_363|>",
|
||
|
|
"<|LOC_364|>",
|
||
|
|
"<|LOC_365|>",
|
||
|
|
"<|LOC_366|>",
|
||
|
|
"<|LOC_367|>",
|
||
|
|
"<|LOC_368|>",
|
||
|
|
"<|LOC_369|>",
|
||
|
|
"<|LOC_370|>",
|
||
|
|
"<|LOC_371|>",
|
||
|
|
"<|LOC_372|>",
|
||
|
|
"<|LOC_373|>",
|
||
|
|
"<|LOC_374|>",
|
||
|
|
"<|LOC_375|>",
|
||
|
|
"<|LOC_376|>",
|
||
|
|
"<|LOC_377|>",
|
||
|
|
"<|LOC_378|>",
|
||
|
|
"<|LOC_379|>",
|
||
|
|
"<|LOC_380|>",
|
||
|
|
"<|LOC_381|>",
|
||
|
|
"<|LOC_382|>",
|
||
|
|
"<|LOC_383|>",
|
||
|
|
"<|LOC_384|>",
|
||
|
|
"<|LOC_385|>",
|
||
|
|
"<|LOC_386|>",
|
||
|
|
"<|LOC_387|>",
|
||
|
|
"<|LOC_388|>",
|
||
|
|
"<|LOC_389|>",
|
||
|
|
"<|LOC_390|>",
|
||
|
|
"<|LOC_391|>",
|
||
|
|
"<|LOC_392|>",
|
||
|
|
"<|LOC_393|>",
|
||
|
|
"<|LOC_394|>",
|
||
|
|
"<|LOC_395|>",
|
||
|
|
"<|LOC_396|>",
|
||
|
|
"<|LOC_397|>",
|
||
|
|
"<|LOC_398|>",
|
||
|
|
"<|LOC_399|>",
|
||
|
|
"<|LOC_400|>",
|
||
|
|
"<|LOC_401|>",
|
||
|
|
"<|LOC_402|>",
|
||
|
|
"<|LOC_403|>",
|
||
|
|
"<|LOC_404|>",
|
||
|
|
"<|LOC_405|>",
|
||
|
|
"<|LOC_406|>",
|
||
|
|
"<|LOC_407|>",
|
||
|
|
"<|LOC_408|>",
|
||
|
|
"<|LOC_409|>",
|
||
|
|
"<|LOC_410|>",
|
||
|
|
"<|LOC_411|>",
|
||
|
|
"<|LOC_412|>",
|
||
|
|
"<|LOC_413|>",
|
||
|
|
"<|LOC_414|>",
|
||
|
|
"<|LOC_415|>",
|
||
|
|
"<|LOC_416|>",
|
||
|
|
"<|LOC_417|>",
|
||
|
|
"<|LOC_418|>",
|
||
|
|
"<|LOC_419|>",
|
||
|
|
"<|LOC_420|>",
|
||
|
|
"<|LOC_421|>",
|
||
|
|
"<|LOC_422|>",
|
||
|
|
"<|LOC_423|>",
|
||
|
|
"<|LOC_424|>",
|
||
|
|
"<|LOC_425|>",
|
||
|
|
"<|LOC_426|>",
|
||
|
|
"<|LOC_427|>",
|
||
|
|
"<|LOC_428|>",
|
||
|
|
"<|LOC_429|>",
|
||
|
|
"<|LOC_430|>",
|
||
|
|
"<|LOC_431|>",
|
||
|
|
"<|LOC_432|>",
|
||
|
|
"<|LOC_433|>",
|
||
|
|
"<|LOC_434|>",
|
||
|
|
"<|LOC_435|>",
|
||
|
|
"<|LOC_436|>",
|
||
|
|
"<|LOC_437|>",
|
||
|
|
"<|LOC_438|>",
|
||
|
|
"<|LOC_439|>",
|
||
|
|
"<|LOC_440|>",
|
||
|
|
"<|LOC_441|>",
|
||
|
|
"<|LOC_442|>",
|
||
|
|
"<|LOC_443|>",
|
||
|
|
"<|LOC_444|>",
|
||
|
|
"<|LOC_445|>",
|
||
|
|
"<|LOC_446|>",
|
||
|
|
"<|LOC_447|>",
|
||
|
|
"<|LOC_448|>",
|
||
|
|
"<|LOC_449|>",
|
||
|
|
"<|LOC_450|>",
|
||
|
|
"<|LOC_451|>",
|
||
|
|
"<|LOC_452|>",
|
||
|
|
"<|LOC_453|>",
|
||
|
|
"<|LOC_454|>",
|
||
|
|
"<|LOC_455|>",
|
||
|
|
"<|LOC_456|>",
|
||
|
|
"<|LOC_457|>",
|
||
|
|
"<|LOC_458|>",
|
||
|
|
"<|LOC_459|>",
|
||
|
|
"<|LOC_460|>",
|
||
|
|
"<|LOC_461|>",
|
||
|
|
"<|LOC_462|>",
|
||
|
|
"<|LOC_463|>",
|
||
|
|
"<|LOC_464|>",
|
||
|
|
"<|LOC_465|>",
|
||
|
|
"<|LOC_466|>",
|
||
|
|
"<|LOC_467|>",
|
||
|
|
"<|LOC_468|>",
|
||
|
|
"<|LOC_469|>",
|
||
|
|
"<|LOC_470|>",
|
||
|
|
"<|LOC_471|>",
|
||
|
|
"<|LOC_472|>",
|
||
|
|
"<|LOC_473|>",
|
||
|
|
"<|LOC_474|>",
|
||
|
|
"<|LOC_475|>",
|
||
|
|
"<|LOC_476|>",
|
||
|
|
"<|LOC_477|>",
|
||
|
|
"<|LOC_478|>",
|
||
|
|
"<|LOC_479|>",
|
||
|
|
"<|LOC_480|>",
|
||
|
|
"<|LOC_481|>",
|
||
|
|
"<|LOC_482|>",
|
||
|
|
"<|LOC_483|>",
|
||
|
|
"<|LOC_484|>",
|
||
|
|
"<|LOC_485|>",
|
||
|
|
"<|LOC_486|>",
|
||
|
|
"<|LOC_487|>",
|
||
|
|
"<|LOC_488|>",
|
||
|
|
"<|LOC_489|>",
|
||
|
|
"<|LOC_490|>",
|
||
|
|
"<|LOC_491|>",
|
||
|
|
"<|LOC_492|>",
|
||
|
|
"<|LOC_493|>",
|
||
|
|
"<|LOC_494|>",
|
||
|
|
"<|LOC_495|>",
|
||
|
|
"<|LOC_496|>",
|
||
|
|
"<|LOC_497|>",
|
||
|
|
"<|LOC_498|>",
|
||
|
|
"<|LOC_499|>",
|
||
|
|
"<|LOC_500|>",
|
||
|
|
"<|LOC_501|>",
|
||
|
|
"<|LOC_502|>",
|
||
|
|
"<|LOC_503|>",
|
||
|
|
"<|LOC_504|>",
|
||
|
|
"<|LOC_505|>",
|
||
|
|
"<|LOC_506|>",
|
||
|
|
"<|LOC_507|>",
|
||
|
|
"<|LOC_508|>",
|
||
|
|
"<|LOC_509|>",
|
||
|
|
"<|LOC_510|>",
|
||
|
|
"<|LOC_511|>",
|
||
|
|
"<|LOC_512|>",
|
||
|
|
"<|LOC_513|>",
|
||
|
|
"<|LOC_514|>",
|
||
|
|
"<|LOC_515|>",
|
||
|
|
"<|LOC_516|>",
|
||
|
|
"<|LOC_517|>",
|
||
|
|
"<|LOC_518|>",
|
||
|
|
"<|LOC_519|>",
|
||
|
|
"<|LOC_520|>",
|
||
|
|
"<|LOC_521|>",
|
||
|
|
"<|LOC_522|>",
|
||
|
|
"<|LOC_523|>",
|
||
|
|
"<|LOC_524|>",
|
||
|
|
"<|LOC_525|>",
|
||
|
|
"<|LOC_526|>",
|
||
|
|
"<|LOC_527|>",
|
||
|
|
"<|LOC_528|>",
|
||
|
|
"<|LOC_529|>",
|
||
|
|
"<|LOC_530|>",
|
||
|
|
"<|LOC_531|>",
|
||
|
|
"<|LOC_532|>",
|
||
|
|
"<|LOC_533|>",
|
||
|
|
"<|LOC_534|>",
|
||
|
|
"<|LOC_535|>",
|
||
|
|
"<|LOC_536|>",
|
||
|
|
"<|LOC_537|>",
|
||
|
|
"<|LOC_538|>",
|
||
|
|
"<|LOC_539|>",
|
||
|
|
"<|LOC_540|>",
|
||
|
|
"<|LOC_541|>",
|
||
|
|
"<|LOC_542|>",
|
||
|
|
"<|LOC_543|>",
|
||
|
|
"<|LOC_544|>",
|
||
|
|
"<|LOC_545|>",
|
||
|
|
"<|LOC_546|>",
|
||
|
|
"<|LOC_547|>",
|
||
|
|
"<|LOC_548|>",
|
||
|
|
"<|LOC_549|>",
|
||
|
|
"<|LOC_550|>",
|
||
|
|
"<|LOC_551|>",
|
||
|
|
"<|LOC_552|>",
|
||
|
|
"<|LOC_553|>",
|
||
|
|
"<|LOC_554|>",
|
||
|
|
"<|LOC_555|>",
|
||
|
|
"<|LOC_556|>",
|
||
|
|
"<|LOC_557|>",
|
||
|
|
"<|LOC_558|>",
|
||
|
|
"<|LOC_559|>",
|
||
|
|
"<|LOC_560|>",
|
||
|
|
"<|LOC_561|>",
|
||
|
|
"<|LOC_562|>",
|
||
|
|
"<|LOC_563|>",
|
||
|
|
"<|LOC_564|>",
|
||
|
|
"<|LOC_565|>",
|
||
|
|
"<|LOC_566|>",
|
||
|
|
"<|LOC_567|>",
|
||
|
|
"<|LOC_568|>",
|
||
|
|
"<|LOC_569|>",
|
||
|
|
"<|LOC_570|>",
|
||
|
|
"<|LOC_571|>",
|
||
|
|
"<|LOC_572|>",
|
||
|
|
"<|LOC_573|>",
|
||
|
|
"<|LOC_574|>",
|
||
|
|
"<|LOC_575|>",
|
||
|
|
"<|LOC_576|>",
|
||
|
|
"<|LOC_577|>",
|
||
|
|
"<|LOC_578|>",
|
||
|
|
"<|LOC_579|>",
|
||
|
|
"<|LOC_580|>",
|
||
|
|
"<|LOC_581|>",
|
||
|
|
"<|LOC_582|>",
|
||
|
|
"<|LOC_583|>",
|
||
|
|
"<|LOC_584|>",
|
||
|
|
"<|LOC_585|>",
|
||
|
|
"<|LOC_586|>",
|
||
|
|
"<|LOC_587|>",
|
||
|
|
"<|LOC_588|>",
|
||
|
|
"<|LOC_589|>",
|
||
|
|
"<|LOC_590|>",
|
||
|
|
"<|LOC_591|>",
|
||
|
|
"<|LOC_592|>",
|
||
|
|
"<|LOC_593|>",
|
||
|
|
"<|LOC_594|>",
|
||
|
|
"<|LOC_595|>",
|
||
|
|
"<|LOC_596|>",
|
||
|
|
"<|LOC_597|>",
|
||
|
|
"<|LOC_598|>",
|
||
|
|
"<|LOC_599|>",
|
||
|
|
"<|LOC_600|>",
|
||
|
|
"<|LOC_601|>",
|
||
|
|
"<|LOC_602|>",
|
||
|
|
"<|LOC_603|>",
|
||
|
|
"<|LOC_604|>",
|
||
|
|
"<|LOC_605|>",
|
||
|
|
"<|LOC_606|>",
|
||
|
|
"<|LOC_607|>",
|
||
|
|
"<|LOC_608|>",
|
||
|
|
"<|LOC_609|>",
|
||
|
|
"<|LOC_610|>",
|
||
|
|
"<|LOC_611|>",
|
||
|
|
"<|LOC_612|>",
|
||
|
|
"<|LOC_613|>",
|
||
|
|
"<|LOC_614|>",
|
||
|
|
"<|LOC_615|>",
|
||
|
|
"<|LOC_616|>",
|
||
|
|
"<|LOC_617|>",
|
||
|
|
"<|LOC_618|>",
|
||
|
|
"<|LOC_619|>",
|
||
|
|
"<|LOC_620|>",
|
||
|
|
"<|LOC_621|>",
|
||
|
|
"<|LOC_622|>",
|
||
|
|
"<|LOC_623|>",
|
||
|
|
"<|LOC_624|>",
|
||
|
|
"<|LOC_625|>",
|
||
|
|
"<|LOC_626|>",
|
||
|
|
"<|LOC_627|>",
|
||
|
|
"<|LOC_628|>",
|
||
|
|
"<|LOC_629|>",
|
||
|
|
"<|LOC_630|>",
|
||
|
|
"<|LOC_631|>",
|
||
|
|
"<|LOC_632|>",
|
||
|
|
"<|LOC_633|>",
|
||
|
|
"<|LOC_634|>",
|
||
|
|
"<|LOC_635|>",
|
||
|
|
"<|LOC_636|>",
|
||
|
|
"<|LOC_637|>",
|
||
|
|
"<|LOC_638|>",
|
||
|
|
"<|LOC_639|>",
|
||
|
|
"<|LOC_640|>",
|
||
|
|
"<|LOC_641|>",
|
||
|
|
"<|LOC_642|>",
|
||
|
|
"<|LOC_643|>",
|
||
|
|
"<|LOC_644|>",
|
||
|
|
"<|LOC_645|>",
|
||
|
|
"<|LOC_646|>",
|
||
|
|
"<|LOC_647|>",
|
||
|
|
"<|LOC_648|>",
|
||
|
|
"<|LOC_649|>",
|
||
|
|
"<|LOC_650|>",
|
||
|
|
"<|LOC_651|>",
|
||
|
|
"<|LOC_652|>",
|
||
|
|
"<|LOC_653|>",
|
||
|
|
"<|LOC_654|>",
|
||
|
|
"<|LOC_655|>",
|
||
|
|
"<|LOC_656|>",
|
||
|
|
"<|LOC_657|>",
|
||
|
|
"<|LOC_658|>",
|
||
|
|
"<|LOC_659|>",
|
||
|
|
"<|LOC_660|>",
|
||
|
|
"<|LOC_661|>",
|
||
|
|
"<|LOC_662|>",
|
||
|
|
"<|LOC_663|>",
|
||
|
|
"<|LOC_664|>",
|
||
|
|
"<|LOC_665|>",
|
||
|
|
"<|LOC_666|>",
|
||
|
|
"<|LOC_667|>",
|
||
|
|
"<|LOC_668|>",
|
||
|
|
"<|LOC_669|>",
|
||
|
|
"<|LOC_670|>",
|
||
|
|
"<|LOC_671|>",
|
||
|
|
"<|LOC_672|>",
|
||
|
|
"<|LOC_673|>",
|
||
|
|
"<|LOC_674|>",
|
||
|
|
"<|LOC_675|>",
|
||
|
|
"<|LOC_676|>",
|
||
|
|
"<|LOC_677|>",
|
||
|
|
"<|LOC_678|>",
|
||
|
|
"<|LOC_679|>",
|
||
|
|
"<|LOC_680|>",
|
||
|
|
"<|LOC_681|>",
|
||
|
|
"<|LOC_682|>",
|
||
|
|
"<|LOC_683|>",
|
||
|
|
"<|LOC_684|>",
|
||
|
|
"<|LOC_685|>",
|
||
|
|
"<|LOC_686|>",
|
||
|
|
"<|LOC_687|>",
|
||
|
|
"<|LOC_688|>",
|
||
|
|
"<|LOC_689|>",
|
||
|
|
"<|LOC_690|>",
|
||
|
|
"<|LOC_691|>",
|
||
|
|
"<|LOC_692|>",
|
||
|
|
"<|LOC_693|>",
|
||
|
|
"<|LOC_694|>",
|
||
|
|
"<|LOC_695|>",
|
||
|
|
"<|LOC_696|>",
|
||
|
|
"<|LOC_697|>",
|
||
|
|
"<|LOC_698|>",
|
||
|
|
"<|LOC_699|>",
|
||
|
|
"<|LOC_700|>",
|
||
|
|
"<|LOC_701|>",
|
||
|
|
"<|LOC_702|>",
|
||
|
|
"<|LOC_703|>",
|
||
|
|
"<|LOC_704|>",
|
||
|
|
"<|LOC_705|>",
|
||
|
|
"<|LOC_706|>",
|
||
|
|
"<|LOC_707|>",
|
||
|
|
"<|LOC_708|>",
|
||
|
|
"<|LOC_709|>",
|
||
|
|
"<|LOC_710|>",
|
||
|
|
"<|LOC_711|>",
|
||
|
|
"<|LOC_712|>",
|
||
|
|
"<|LOC_713|>",
|
||
|
|
"<|LOC_714|>",
|
||
|
|
"<|LOC_715|>",
|
||
|
|
"<|LOC_716|>",
|
||
|
|
"<|LOC_717|>",
|
||
|
|
"<|LOC_718|>",
|
||
|
|
"<|LOC_719|>",
|
||
|
|
"<|LOC_720|>",
|
||
|
|
"<|LOC_721|>",
|
||
|
|
"<|LOC_722|>",
|
||
|
|
"<|LOC_723|>",
|
||
|
|
"<|LOC_724|>",
|
||
|
|
"<|LOC_725|>",
|
||
|
|
"<|LOC_726|>",
|
||
|
|
"<|LOC_727|>",
|
||
|
|
"<|LOC_728|>",
|
||
|
|
"<|LOC_729|>",
|
||
|
|
"<|LOC_730|>",
|
||
|
|
"<|LOC_731|>",
|
||
|
|
"<|LOC_732|>",
|
||
|
|
"<|LOC_733|>",
|
||
|
|
"<|LOC_734|>",
|
||
|
|
"<|LOC_735|>",
|
||
|
|
"<|LOC_736|>",
|
||
|
|
"<|LOC_737|>",
|
||
|
|
"<|LOC_738|>",
|
||
|
|
"<|LOC_739|>",
|
||
|
|
"<|LOC_740|>",
|
||
|
|
"<|LOC_741|>",
|
||
|
|
"<|LOC_742|>",
|
||
|
|
"<|LOC_743|>",
|
||
|
|
"<|LOC_744|>",
|
||
|
|
"<|LOC_745|>",
|
||
|
|
"<|LOC_746|>",
|
||
|
|
"<|LOC_747|>",
|
||
|
|
"<|LOC_748|>",
|
||
|
|
"<|LOC_749|>",
|
||
|
|
"<|LOC_750|>",
|
||
|
|
"<|LOC_751|>",
|
||
|
|
"<|LOC_752|>",
|
||
|
|
"<|LOC_753|>",
|
||
|
|
"<|LOC_754|>",
|
||
|
|
"<|LOC_755|>",
|
||
|
|
"<|LOC_756|>",
|
||
|
|
"<|LOC_757|>",
|
||
|
|
"<|LOC_758|>",
|
||
|
|
"<|LOC_759|>",
|
||
|
|
"<|LOC_760|>",
|
||
|
|
"<|LOC_761|>",
|
||
|
|
"<|LOC_762|>",
|
||
|
|
"<|LOC_763|>",
|
||
|
|
"<|LOC_764|>",
|
||
|
|
"<|LOC_765|>",
|
||
|
|
"<|LOC_766|>",
|
||
|
|
"<|LOC_767|>",
|
||
|
|
"<|LOC_768|>",
|
||
|
|
"<|LOC_769|>",
|
||
|
|
"<|LOC_770|>",
|
||
|
|
"<|LOC_771|>",
|
||
|
|
"<|LOC_772|>",
|
||
|
|
"<|LOC_773|>",
|
||
|
|
"<|LOC_774|>",
|
||
|
|
"<|LOC_775|>",
|
||
|
|
"<|LOC_776|>",
|
||
|
|
"<|LOC_777|>",
|
||
|
|
"<|LOC_778|>",
|
||
|
|
"<|LOC_779|>",
|
||
|
|
"<|LOC_780|>",
|
||
|
|
"<|LOC_781|>",
|
||
|
|
"<|LOC_782|>",
|
||
|
|
"<|LOC_783|>",
|
||
|
|
"<|LOC_784|>",
|
||
|
|
"<|LOC_785|>",
|
||
|
|
"<|LOC_786|>",
|
||
|
|
"<|LOC_787|>",
|
||
|
|
"<|LOC_788|>",
|
||
|
|
"<|LOC_789|>",
|
||
|
|
"<|LOC_790|>",
|
||
|
|
"<|LOC_791|>",
|
||
|
|
"<|LOC_792|>",
|
||
|
|
"<|LOC_793|>",
|
||
|
|
"<|LOC_794|>",
|
||
|
|
"<|LOC_795|>",
|
||
|
|
"<|LOC_796|>",
|
||
|
|
"<|LOC_797|>",
|
||
|
|
"<|LOC_798|>",
|
||
|
|
"<|LOC_799|>",
|
||
|
|
"<|LOC_800|>",
|
||
|
|
"<|LOC_801|>",
|
||
|
|
"<|LOC_802|>",
|
||
|
|
"<|LOC_803|>",
|
||
|
|
"<|LOC_804|>",
|
||
|
|
"<|LOC_805|>",
|
||
|
|
"<|LOC_806|>",
|
||
|
|
"<|LOC_807|>",
|
||
|
|
"<|LOC_808|>",
|
||
|
|
"<|LOC_809|>",
|
||
|
|
"<|LOC_810|>",
|
||
|
|
"<|LOC_811|>",
|
||
|
|
"<|LOC_812|>",
|
||
|
|
"<|LOC_813|>",
|
||
|
|
"<|LOC_814|>",
|
||
|
|
"<|LOC_815|>",
|
||
|
|
"<|LOC_816|>",
|
||
|
|
"<|LOC_817|>",
|
||
|
|
"<|LOC_818|>",
|
||
|
|
"<|LOC_819|>",
|
||
|
|
"<|LOC_820|>",
|
||
|
|
"<|LOC_821|>",
|
||
|
|
"<|LOC_822|>",
|
||
|
|
"<|LOC_823|>",
|
||
|
|
"<|LOC_824|>",
|
||
|
|
"<|LOC_825|>",
|
||
|
|
"<|LOC_826|>",
|
||
|
|
"<|LOC_827|>",
|
||
|
|
"<|LOC_828|>",
|
||
|
|
"<|LOC_829|>",
|
||
|
|
"<|LOC_830|>",
|
||
|
|
"<|LOC_831|>",
|
||
|
|
"<|LOC_832|>",
|
||
|
|
"<|LOC_833|>",
|
||
|
|
"<|LOC_834|>",
|
||
|
|
"<|LOC_835|>",
|
||
|
|
"<|LOC_836|>",
|
||
|
|
"<|LOC_837|>",
|
||
|
|
"<|LOC_838|>",
|
||
|
|
"<|LOC_839|>",
|
||
|
|
"<|LOC_840|>",
|
||
|
|
"<|LOC_841|>",
|
||
|
|
"<|LOC_842|>",
|
||
|
|
"<|LOC_843|>",
|
||
|
|
"<|LOC_844|>",
|
||
|
|
"<|LOC_845|>",
|
||
|
|
"<|LOC_846|>",
|
||
|
|
"<|LOC_847|>",
|
||
|
|
"<|LOC_848|>",
|
||
|
|
"<|LOC_849|>",
|
||
|
|
"<|LOC_850|>",
|
||
|
|
"<|LOC_851|>",
|
||
|
|
"<|LOC_852|>",
|
||
|
|
"<|LOC_853|>",
|
||
|
|
"<|LOC_854|>",
|
||
|
|
"<|LOC_855|>",
|
||
|
|
"<|LOC_856|>",
|
||
|
|
"<|LOC_857|>",
|
||
|
|
"<|LOC_858|>",
|
||
|
|
"<|LOC_859|>",
|
||
|
|
"<|LOC_860|>",
|
||
|
|
"<|LOC_861|>",
|
||
|
|
"<|LOC_862|>",
|
||
|
|
"<|LOC_863|>",
|
||
|
|
"<|LOC_864|>",
|
||
|
|
"<|LOC_865|>",
|
||
|
|
"<|LOC_866|>",
|
||
|
|
"<|LOC_867|>",
|
||
|
|
"<|LOC_868|>",
|
||
|
|
"<|LOC_869|>",
|
||
|
|
"<|LOC_870|>",
|
||
|
|
"<|LOC_871|>",
|
||
|
|
"<|LOC_872|>",
|
||
|
|
"<|LOC_873|>",
|
||
|
|
"<|LOC_874|>",
|
||
|
|
"<|LOC_875|>",
|
||
|
|
"<|LOC_876|>",
|
||
|
|
"<|LOC_877|>",
|
||
|
|
"<|LOC_878|>",
|
||
|
|
"<|LOC_879|>",
|
||
|
|
"<|LOC_880|>",
|
||
|
|
"<|LOC_881|>",
|
||
|
|
"<|LOC_882|>",
|
||
|
|
"<|LOC_883|>",
|
||
|
|
"<|LOC_884|>",
|
||
|
|
"<|LOC_885|>",
|
||
|
|
"<|LOC_886|>",
|
||
|
|
"<|LOC_887|>",
|
||
|
|
"<|LOC_888|>",
|
||
|
|
"<|LOC_889|>",
|
||
|
|
"<|LOC_890|>",
|
||
|
|
"<|LOC_891|>",
|
||
|
|
"<|LOC_892|>",
|
||
|
|
"<|LOC_893|>",
|
||
|
|
"<|LOC_894|>",
|
||
|
|
"<|LOC_895|>",
|
||
|
|
"<|LOC_896|>",
|
||
|
|
"<|LOC_897|>",
|
||
|
|
"<|LOC_898|>",
|
||
|
|
"<|LOC_899|>",
|
||
|
|
"<|LOC_900|>",
|
||
|
|
"<|LOC_901|>",
|
||
|
|
"<|LOC_902|>",
|
||
|
|
"<|LOC_903|>",
|
||
|
|
"<|LOC_904|>",
|
||
|
|
"<|LOC_905|>",
|
||
|
|
"<|LOC_906|>",
|
||
|
|
"<|LOC_907|>",
|
||
|
|
"<|LOC_908|>",
|
||
|
|
"<|LOC_909|>",
|
||
|
|
"<|LOC_910|>",
|
||
|
|
"<|LOC_911|>",
|
||
|
|
"<|LOC_912|>",
|
||
|
|
"<|LOC_913|>",
|
||
|
|
"<|LOC_914|>",
|
||
|
|
"<|LOC_915|>",
|
||
|
|
"<|LOC_916|>",
|
||
|
|
"<|LOC_917|>",
|
||
|
|
"<|LOC_918|>",
|
||
|
|
"<|LOC_919|>",
|
||
|
|
"<|LOC_920|>",
|
||
|
|
"<|LOC_921|>",
|
||
|
|
"<|LOC_922|>",
|
||
|
|
"<|LOC_923|>",
|
||
|
|
"<|LOC_924|>",
|
||
|
|
"<|LOC_925|>",
|
||
|
|
"<|LOC_926|>",
|
||
|
|
"<|LOC_927|>",
|
||
|
|
"<|LOC_928|>",
|
||
|
|
"<|LOC_929|>",
|
||
|
|
"<|LOC_930|>",
|
||
|
|
"<|LOC_931|>",
|
||
|
|
"<|LOC_932|>",
|
||
|
|
"<|LOC_933|>",
|
||
|
|
"<|LOC_934|>",
|
||
|
|
"<|LOC_935|>",
|
||
|
|
"<|LOC_936|>",
|
||
|
|
"<|LOC_937|>",
|
||
|
|
"<|LOC_938|>",
|
||
|
|
"<|LOC_939|>",
|
||
|
|
"<|LOC_940|>",
|
||
|
|
"<|LOC_941|>",
|
||
|
|
"<|LOC_942|>",
|
||
|
|
"<|LOC_943|>",
|
||
|
|
"<|LOC_944|>",
|
||
|
|
"<|LOC_945|>",
|
||
|
|
"<|LOC_946|>",
|
||
|
|
"<|LOC_947|>",
|
||
|
|
"<|LOC_948|>",
|
||
|
|
"<|LOC_949|>",
|
||
|
|
"<|LOC_950|>",
|
||
|
|
"<|LOC_951|>",
|
||
|
|
"<|LOC_952|>",
|
||
|
|
"<|LOC_953|>",
|
||
|
|
"<|LOC_954|>",
|
||
|
|
"<|LOC_955|>",
|
||
|
|
"<|LOC_956|>",
|
||
|
|
"<|LOC_957|>",
|
||
|
|
"<|LOC_958|>",
|
||
|
|
"<|LOC_959|>",
|
||
|
|
"<|LOC_960|>",
|
||
|
|
"<|LOC_961|>",
|
||
|
|
"<|LOC_962|>",
|
||
|
|
"<|LOC_963|>",
|
||
|
|
"<|LOC_964|>",
|
||
|
|
"<|LOC_965|>",
|
||
|
|
"<|LOC_966|>",
|
||
|
|
"<|LOC_967|>",
|
||
|
|
"<|LOC_968|>",
|
||
|
|
"<|LOC_969|>",
|
||
|
|
"<|LOC_970|>",
|
||
|
|
"<|LOC_971|>",
|
||
|
|
"<|LOC_972|>",
|
||
|
|
"<|LOC_973|>",
|
||
|
|
"<|LOC_974|>",
|
||
|
|
"<|LOC_975|>",
|
||
|
|
"<|LOC_976|>",
|
||
|
|
"<|LOC_977|>",
|
||
|
|
"<|LOC_978|>",
|
||
|
|
"<|LOC_979|>",
|
||
|
|
"<|LOC_980|>",
|
||
|
|
"<|LOC_981|>",
|
||
|
|
"<|LOC_982|>",
|
||
|
|
"<|LOC_983|>",
|
||
|
|
"<|LOC_984|>",
|
||
|
|
"<|LOC_985|>",
|
||
|
|
"<|LOC_986|>",
|
||
|
|
"<|LOC_987|>",
|
||
|
|
"<|LOC_988|>",
|
||
|
|
"<|LOC_989|>",
|
||
|
|
"<|LOC_990|>",
|
||
|
|
"<|LOC_991|>",
|
||
|
|
"<|LOC_992|>",
|
||
|
|
"<|LOC_993|>",
|
||
|
|
"<|LOC_994|>",
|
||
|
|
"<|LOC_995|>",
|
||
|
|
"<|LOC_996|>",
|
||
|
|
"<|LOC_997|>",
|
||
|
|
"<|LOC_998|>",
|
||
|
|
"<|LOC_999|>",
|
||
|
|
"<|LOC_1000|>",
|
||
|
|
"<|LOC_BEGIN|>",
|
||
|
|
"<|LOC_END|>",
|
||
|
|
"<|LOC_SEP|>",
|
||
|
|
"<|CROP_COL_SEP|>",
|
||
|
|
"<|CROP_ROW_SEP|>",
|
||
|
|
"<|IMAGE_SEP|>",
|
||
|
|
"<mask:4>",
|
||
|
|
"<mask:5>",
|
||
|
|
"<mask:6>",
|
||
|
|
"<mask:7>"
|
||
|
|
],
|
||
|
|
"bos_token": {
|
||
|
|
"content": "<s>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"cls_token": {
|
||
|
|
"content": "<|begin_of_sentence|>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"eos_token": {
|
||
|
|
"content": "</s>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"mask_token": {
|
||
|
|
"content": "<mask:1>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"pad_token": {
|
||
|
|
"content": "<unk>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"sep_token": {
|
||
|
|
"content": "<|end_of_sentence|>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
},
|
||
|
|
"unk_token": {
|
||
|
|
"content": "<unk>",
|
||
|
|
"lstrip": false,
|
||
|
|
"normalized": false,
|
||
|
|
"rstrip": false,
|
||
|
|
"single_word": false
|
||
|
|
}
|
||
|
|
}
|