tokenizer函数结果保存、tokenize函数python用法

1、tokenizer用于数据预处理，自动填充输入至最大长度，便于训练过程，并在训练中断或重用模型时保存分词器计算指标compute_metrics函数用于评估时计算指标，接收EvalPrediction对象并返回指标字典回调函数允许自定义训练循环，可添加到默认回调函数列表中，使用Traine