Transformer 模型
分词器把文本转为词元编号,Transformer 处理其表示。调整模型设置前,先确认输入与输出的形状。
数据集与分词
实验前划分训练、验证和测试样本。使用与模型匹配的分词器,并检查填充、截断和标签。
模型评估
选择与任务相符的指标,并逐条查看错误。不要用测试集调整提示或训练过程,以免高估效果。
实践作业
运行一个小型文本分类示例,保存五个预测,并结合输入解释两个错误。
完成标准
- 用自己的话解释三个主题。
- 完成作业并保存成果或设计笔记。
- 测试一个边界情况,并记录一个局限。