41 lines
812 B
JSON
41 lines
812 B
JSON
|
{
|
||
|
|
"bos_token": "<|begin_of_text|>",
|
||
|
|
"eos_token": "<|end_of_text|>",
|
||
|
|
"pad_token": "<|pad|>",
|
||
|
|
"unk_token": "<|unk|>",
|
||
|
|
"sep_token": "<|sep|>",
|
||
|
|
"mask_token": "<|mask|>",
|
||
|
|
"additional_special_tokens": [
|
||
|
|
"<|start_header|>",
|
||
|
|
"<|end_header|>",
|
||
|
|
"<|eot|>",
|
||
|
|
"<|system|>",
|
||
|
|
"<|user|>",
|
||
|
|
"<|assistant|>",
|
||
|
|
"<think>",
|
||
|
|
"</think>",
|
||
|
|
"<|code|>",
|
||
|
|
"<|/code|>",
|
||
|
|
"<|tool_call|>",
|
||
|
|
"<|tool_result|>",
|
||
|
|
"<|/tool_call|>",
|
||
|
|
"<|/tool_result|>",
|
||
|
|
"<|expert_0|>",
|
||
|
|
"<|expert_1|>",
|
||
|
|
"<|expert_2|>",
|
||
|
|
"<|expert_3|>",
|
||
|
|
"<|expert_4|>",
|
||
|
|
"<|expert_5|>",
|
||
|
|
"<|expert_6|>",
|
||
|
|
"<|expert_7|>",
|
||
|
|
"<|expert_8|>",
|
||
|
|
"<|expert_9|>",
|
||
|
|
"<|expert_10|>",
|
||
|
|
"<|expert_11|>",
|
||
|
|
"<|expert_12|>",
|
||
|
|
"<|expert_13|>",
|
||
|
|
"<|expert_14|>",
|
||
|
|
"<|expert_15|>"
|
||
|
|
]
|
||
|
|
}
|