新闻详情

新闻详情

首页 / 资讯中心 / 详情

UltraData-RL-2609 Math数据集入门:3.2万道竞赛级数学题与答案匹配验证机制

发布时间:2026/11/10 9:02:49来源:尧图网络
UltraData-RL-2609 Math数据集入门:3.2万道竞赛级数学题与答案匹配验证机制
UltraData-RL-2609 Math数据集入门3.2万道竞赛级数学题与答案匹配验证机制【免费下载链接】UltraData-RL-2609项目地址: https://ai.gitcode.com/OpenBMB/UltraData-RL-2609正在为数学强化学习挑选训练数据UltraData-RL-2609 Math数据集是 OpenBMB 开源的可验证奖励Verifiable Reward强化学习数据Math 切片收录32,412 道竞赛级数学题——每题都有唯一参考答案模型输出与答案做答案匹配即可自动判定对错是 RLVR可验证奖励 RL后训练的即插即用语料。 先认识 UltraData-RL-2609 是什么UltraData-RL-2609 是 UltraData 平台 L0-L4 分级数据框架中的L3 精炼数据专为 MiniCPM5-2B 等端侧模型的后训练 RL 阶段构建。整个数据集共85,995 条样本覆盖四个方向方向样本数占比结果如何验证Math32,41237.7%与ground_truth做答案匹配Code23,66527.5%沙箱执行测试用例Long-Context18,04621.0%答案匹配 上下文支撑校验Knowledge11,87213.8%答案匹配合计85,995100%其中Math 是占比最大、验证方式最纯粹的切片答案唯一、机器可判定奖励信号零人工成本。这也是本文聚焦它的原因。 Math 数据集文件结构4 个分片共 3.2 万题Math 切片存放在 data/Math/ 目录按 JSONL 分片存储每行一条题目文件样本数Math_part-1-of-4.jsonl10,000Math_part-2-of-4.jsonl10,000Math_part-3-of-4.jsonl10,000Math_part-4-of-4.jsonl2,412合计32,412题目从哪里来Math 切片由 DAPO-Math-17k、DeepScaleR 和 DeepMath-103K 三个公开可验证数学 RL 数据集取并集再统一改写为简答题形式。选择题、判断题、证明题、多问题和依赖图片的题目已在构建流水线中全部剔除——留下来的都是算出一个答案的题。题面难度分布很广从13 支铅笔 3 块橡皮 1 美元的小学生应用题到代数数域的 Galois 扩张、线性代数向量空间维数等竞赛与研究生水平题目。 样本格式统一的五字段 JSONL 结构每条样本包含 5 个字段直接看一条真实样例来自 data/Math/Math_part-1-of-4.jsonl 第一行{ uuid: Math_00001, query: Oscar buys 13 pencils and 3 erasers for $1.00. …\nPlease reason step by step, and put your final answer within \boxed{}., ground_truth: 10, source: UltraData-RL-2609, domain: Math }字段说明uuid全局唯一 ID格式为Math_序号query完整题面末尾统一追加把最终答案放入\boxed{}的指令ground_truth参考答案字符串source数据来源domain固定为Math 两个值得注意的设计\boxed{}统一答案抽取约定所有题面都要求模型把最终答案放进\boxed{}训练时只需正则抽取该表达式再与ground_truth比对即可得到 0/1 奖励无需 LLM 判分。答案形式已被标准化数值10、代数式4\sqrt{5}、分数\dfrac{2}{5}、区间[0,1]、特值Yes/No等均可自动匹配。⚙️ 核心机制答案匹配如何判定奖励Math 切片的奖励可信来自构建流水线详见 README_ZH.md 的六阶段流程中的三道关卡第 1 关 · 可验证性过滤—— 只保留答案唯一、可自动校验的题。答案不唯一或无法机器抽取的样本直接出局。第 2 关 · 多模型共识校验—— 由多个独立模型重新求解每道题按共识确认参考答案没有共识的题直接丢弃绝不猜测。同时 LLM Judge 会审核题目—答案的一致性剔除题答不符的脏数据。第 3 关 · 难度校准不碰标签—— 在 RL 初始化 checkpoint 上对每题多次 rollout估算经验通过率然后按通过率分流通过率处理策略原因 1全对❌ 移除已完全掌握无梯度信号0 p 1可学习区间✅ 保留最有学习价值 0 且标签已确认合法✅ 保留交给在线动态采样调控频率⚠️ 关键原则难度筛选只改采样权重从不修改参考答案标签——保证了奖励信号可追溯。 新手快速开始3 行代码加载 Math 数据使用 Hugging Facedatasets库config 名固定为Mathfrom datasets import load_dataset ds load_dataset(openbmb/UltraData-RL-2609, Math, splittrain) print(ds[0][query][:300]) # 查看题面 print(ds[0][ground_truth]) # 查看参考答案加载后即可按uuid定位任意样本、按\boxed{}抽取模型答案做匹配验证。若需本地克隆数据仓库地址https://gitcode.com/OpenBMB/UltraData-RL-2609。 为什么 Math 切片值得用真实提升效果数学题是 RLVR 最干净的奖励来源——对错判定不依赖主观评分训练信号稳定。实际效果上以 UltraData-RL-2609 为训练集的JustRL II实验中AIME 2025 得分在约 300 步 RL 内从 61 提升到 81 最终基于该数据完成训练的 MiniCPM5-2B 在 AIME 2025 达到86⚠️ 使用注意与许可许可项目按 Apache 2.0 发布但上游数据集的 MIT / CC BY / CC BY-SA 条款对派生内容继续适用禁止未经书面授权的原样转载或商业化再打包。静态标签构建时的难度过滤与在线采样权重不作为字段发布只保留最终入选样本。去污范围仅覆盖构建时已知的公开评测集引入新基准前建议自行去污检测。总结UltraData-RL-2609 的 Math 切片 3.2 万道答案唯一的竞赛级数学题 \boxed{}统一抽取 多模型共识背书的标签 难度校准。对想做数学 RLVR 后训练的新手来说这是一份开箱即用、奖励机制透明的完整语料。【免费下载链接】UltraData-RL-2609项目地址: https://ai.gitcode.com/OpenBMB/UltraData-RL-2609创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考
网站建设高端定制企业官网
RELATED

相关资讯

更多精彩内容,欢迎继续阅读

较早相关资讯

最新相关资讯

【外设】之大彩串口显示屏 2026/11/10 4:49:37

【外设】之大彩串口显示屏

大彩串口屏初步使用 1 .官网下载 STM32 屏幕 GUI 设计资料 http://www.gz-dc.com/category/typeid/4112 找到 STM32 Keil 工程,移植相关代码因项目而异进行移植,由于项目简单,本人只对用到的指令接口进行修改。 比如:注意事项&…

阅读更多 →
无法下载Windows系统iso文件 2026/11/9 8:37:19

无法下载Windows系统iso文件

当我遇到这个问题的时候,我打开了一个网站: 登录 然后我打算下载的时候: 突然那个官方的连接就可以下载了:

阅读更多 →
【清华代码熊】DeepSeek V4.1 Flash 后训练详解 2026/11/10 9:14:31

【清华代码熊】DeepSeek V4.1 Flash 后训练详解

📌 上期解析了 DeepSeek V4.1 Flash 模型架构改进,本期解析 DeepSeek V4.1 Flash 预训练/后训练技术: 🌟 预训练:45T 文本 多模态混合语料、直接训练 sparse attention(取消 DeepSeek V4 的 dense 冷启动&…

阅读更多 →
Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ... 2026/11/10 1:10:29

Shuffle-R1: Efficient RL framework for Multimodal Large Language Models via Data-centric Dynamic ...

文章主要内容和创新点 主要内容 本文聚焦于多模态大语言模型(MLLM)强化学习(RL)训练中的效率问题,提出了一个名为Shuffle-R1的框架。研究发现,当前RL训练存在两个关键缺陷: 优势值坍缩(Advantage Collapsing):批次中大多数优势值集中在零附近,导致有效梯度信号被淹…

阅读更多 →
PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction 2026/11/10 15:15:31

PRvL: Quantifying the Capabilities and Risks of Large Language Models for PII Redaction

一、文章主要内容总结 本文聚焦于利用大型语言模型(LLMs)实现个人身份信息(PII)脱敏的研究,旨在解决传统脱敏方法(如基于规则的系统、领域特定命名实体识别(NER)模型)泛化能力差、跨格式/跨语境适应性弱的问题。 研究通过全面评估多种LLM架构(包括密集型LLM(D-LLM…

阅读更多 →
LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model 2026/11/10 17:14:10

LLaVA-RE: Binary Image-Text Relevancy Evaluation with Multimodal Large Language Model

文章主要内容和创新点 主要内容 本文聚焦于二进制图像-文本相关性评估任务(判断图像与文本“相关”或“不相关”),针对该任务中文本格式多样、相关性定义随场景变化等挑战,提出了基于多模态大语言模型(MLLM)的解决方案LLaVA-RE。 模型设计:LLaVA-RE基于LLaVA 1.5架构,…

阅读更多 →

今日资讯

本周资讯

本月资讯

看完文章仍有疑问?

联系尧图顾问,获取一对一建站咨询

立即免费咨询 📞 400-888-8888
📞 ✉