数据集简介
Social IQA 是一个由 AllenAI 发布的社会常识推理问答数据集,旨在评估模型对日常社交情境的理解和推理能力。
主要用途
用于训练和评估模型在社交情境下的常识推理能力,适用于自然语言处理中的问答、推理和对话系统开发。
数据类型/模态
- 模态类型:文本
- 数据形式:基于情境的单选题(三选一),每个问题涉及日常社交互动中的因果、动机、情感等推理。
数据规模与统计
- 包含约 38,000 个高质量的社会常识问答对。
- 每个样本包含一个社交情境描述、一个问题以及三个候选答案(其中一个是正确的)。
使用场景
- 模型训练:提升AI模型对社会常识和人类行为的理解。
- 基准测试:作为评估模型社交推理能力的基准数据集。
- 研究应用:适用于常识推理、情境理解、人机交互等研究方向。