OA0
OA0 是一个探索 AI 的社区
现在注册
已注册用户请  登录
说明
  • 条目同步来自 Hugging Face 主要方便针对性讨论。
OA0  ›  数据集  ›  SII - GAIR

GAIR/OlympicArena

 
  SII - GAIR  ·  2024-07-20 14:30:22  ·  24 次点击  ·  0 条评论  

数据集简介

OlympicArena 是一个用于评估大型语言模型(LLMs)在解决复杂推理问题方面能力的基准数据集。

主要用途

该数据集旨在测试和比较不同 LLMs 在应对需要多步、深度逻辑推理的挑战性问题上的性能。

数据类型/模态

  • 模态:纯文本(Text)
  • 内容:包含一系列精心设计的、具有挑战性的推理问题。

规模与统计

  • 数据量:包含 10,615 条样本。

使用场景

  • 模型评估:作为基准测试,衡量 LLMs 的逻辑推理、问题解决和复杂任务处理能力。
  • 研究开发:用于推动和研发更擅长深度推理的下一代人工智能模型。
24 次点击  ∙  0 人收藏  
登录后收藏  
0 条回复
关于 ·  帮助 ·  PING ·  隐私政策 ·  服务条款   
OA0 - Omni AI 0 一个探索 AI 的社区
沪ICP备2024103595号-2
耗时 12 ms
Developed with Cursor