6.5文本翻译[中英文本翻译]

文档摘要

comments: true title: "文本翻译" translation 前言代码加载数据集在这里选择的配置"en-zh"进行中英文文本翻译，下面为全部数据集详细信息：加载分词器 !!! note "正确设置语言" 在做翻译任务中，请确保适用于多语言的分词器的原始语种和目标语种被正确设置，或者任务本身符合多语言分词器一开始的原始语言和目标语言。查看分词器原始语言与目标语言定义分词函数数据集转化加载模型定义整理函数定义评估函数定义超参数定义训练器训练参考资料 HuggingFace社区教程文本翻译