资讯
还在为大模型洗数据熬夜?蚂蚁拿下VLDB工业最佳论文,一套宽表搞定35PB语料,效率狂飙5.6倍
📌 概要
蚂蚁集团推出大模型数据清洗系统OmniTable,其论文获VLDB 2026工业赛道最佳论文奖。该系统采用统一宽表架构,可处理35PB规模语料,数据清洗效率较传统方案提升5.6倍,解决大模型训练数据准备中数据管线复杂、清洗耗时的痛点。
⚡ 关键要点
- ▸蚂蚁推出统一宽表系统OmniTable,用于大模型训练数据清洗
- ▸论文获评VLDB 2026工业赛道最佳论文
- ▸支持35PB语料规模,清洗效率提升5.6倍
蚂蚁集团推出统一宽表系统OmniTable,论文获评VLDB 2026工业赛道最佳论文