新闻
DataPrep-Bench：将法学硕士作为训练数据准备者进行基准测试
1 分钟阅读
来源：arXiv ML
arXiv:2607.20465v1 公告类型：新 摘要：训练数据的质量从根本上决定了大型语言模型 (LLM) 的能力，但不存在统一的基准来衡量 LLM、代理和以数据为中心的工作流程实际端到端准备训练数据的情况。我们认为LLM驱动的数据准备包括两种互补的能力：数据构建，将原始来源转换为监督训练数据；数据质量评估，在下游训练之前预测候选数据集的训练价值；自始至终，“质量”指的是下游训练效用，而不是表面的文本属性。我们推出 DataPrep-Bench，