tokenizer_config.json文件1.1版本和最新提交的版本一样

#4
by fxb - opened

显示tokenizer_config.json中由上一版本的"eos_token": "<|im_end|>",修改为 "eos_token": "", 但是上一版本就是 "eos_token": "",是没有修改吗?

Sign up or log in to comment