【[51星]WebOrganizer:一个用于优化预训练数据整理的Web领域构建

爱生活爱珂珂 2025-06-05 13:59:03

【[51星]WebOrganizer:一个用于优化预训练数据整理的Web领域构建工具。亮点:1. 提供2个阶段的110万网页分类数据,助力精准训练;2. 包含多种领域分类器,支持URL和内容双重预测;3. 支持大规模数据标注,提升数据质量与多样性】

'WebOrganizer: Organize the Web: Constructing Domains Enhances Pre-Training Data Curation'

GitHub: github.com/CodeCreator/WebOrganizer

数据整理 领域分类 预训练模型 AI创造营

0 阅读:0
爱生活爱珂珂

爱生活爱珂珂

感谢大家的关注