预训练与规模化
区分预训练目标与下游适配。阅读规模化结论时,明确其数据、算力和评测条件。
评测与安全
评测结果取决于任务、数据集与评分过程。检查数据污染风险,以及测试是否符合预期用途。
可解释性研究
可解释性研究关注模型如何计算或表示信息。区分观察到的相关性与因果干预,并说明实验无法证明什么。
实践作业
从课程大纲选择一篇论文,撰写研究简报:问题、方法、基线、证据、局限及一个可复现的后续实验。
完成标准
- 用自己的话解释三个主题。
- 完成作业并保存成果或设计笔记。
- 测试一个边界情况,并记录一个局限。