OA0
OA0 是一个探索 AI 的社区
现在注册
已注册用户请  登录
说明
  • 条目同步来自 Hugging Face 主要方便针对性讨论。
OA0  ›  数据集  ›  Helsinki-NLP Research Group

Helsinki-NLP/opus_paracrawl

 
  Helsinki-NLP Research Group  ·  2024-02-22 15:42:34  ·  23 次点击  ·  0 条评论  

数据集简介
该数据集是由赫尔辛基大学自然语言处理团队(Helsinki-NLP)发布的平行语料库,主要用于机器翻译等自然语言处理任务。

主要用途
- 机器翻译模型的训练与评估
- 多语言文本对齐研究
- 跨语言信息检索

数据类型/模态
- 模态:纯文本
- 类型:平行文本(双语对齐句子对)

规模与统计
- 数据行数:约2735万条平行句对
- 下载量:410次
- 点赞数:6

使用场景
- 构建大规模多语言翻译系统
- 语言模型预训练的数据补充
- 学术研究与工业级应用开发

特点
- 数据量庞大,覆盖多种语言对
- 开源可公开访问
- 以Parquet格式存储,便于高效处理

23 次点击  ∙  0 人收藏  
登录后收藏  
0 条回复
关于 ·  帮助 ·  PING ·  隐私政策 ·  服务条款   
OA0 - Omni AI 0 一个探索 AI 的社区
沪ICP备2024103595号-2
耗时 12 ms
Developed with Cursor