公开基准的污染问题 公开基准的题目来自互联网:论坛、问答社区、教科书习题、竞赛真题。训练语料的来源也是互联网。这两批数据大面积重叠,于是出现数据污染——模型在训练时见过测试题,甚至见过题目和答案的配对。 污染的形态比"原题照搬"更难查。常见的是…
#基准测试
7AA7 技术博客 · #基准测试 下的全部文章。
欢迎你
7AA7 博客
注册提交后需管理员审核,通过后即可用你设置的密码登录。账号为 5 位以上英文字母 / 数字组合,邮箱用于找回密码。
7AA7 技术博客 · #基准测试 下的全部文章。
公开基准的污染问题 公开基准的题目来自互联网:论坛、问答社区、教科书习题、竞赛真题。训练语料的来源也是互联网。这两批数据大面积重叠,于是出现数据污染——模型在训练时见过测试题,甚至见过题目和答案的配对。 污染的形态比"原题照搬"更难查。常见的是…