数据集:

GEM/squad_v2

任务:

task_categories:other

语言:

计算机处理:

unknown

大小:

size_categories:unknown

语言创建人:

unknown

批注创建人:

crowd-sourced

源数据集:

original

预印本库:

arxiv:1806.03822

其他:

question-generation

许可:

cc-by-sa-4.0

数据集介绍文件清单

英文

GEM/squad_v2 数据集卡片

主要数据卡片链接

可以在此链接找到主要数据卡片： GEM Website

数据集摘要

SQuAD2.0 是一个测试模型不仅能回答阅读理解问题，还能在给定的段落中无法回答问题时选择放弃回答的能力的数据集。评估模型在榜单上的性能使用 F1 分数。在 GEM 中，我们使用该数据集用于问题生成任务，模型需要从输入文本中生成类似于 SQuAD 数据集的问题。

可以通过以下方式加载数据集：

import datasets
data = datasets.load_dataset('GEM/squad_v2')

数据加载器可以在此处找到： here

Website

Arxiv

作者：Pranav Rajpurkar，Robin Jia和Percy Liang

数据集概述

数据和文档的获取方式

网页 Website

下载 Website

论文 Arxiv

BibTex

@inproceedings{Rajpurkar2018KnowWY,
  title={Know What You Don’t Know: Unanswerable Questions for SQuAD},
  author={Pranav Rajpurkar and Robin Jia and Percy Liang},
  booktitle={ACL},
  year={2018}
}

联系人姓名 Robin Jia

联系人邮箱 robinjia@stanford.edu

有榜单吗？是

榜单链接 Website

榜单详情：SQuAD2.0 测试了系统在不仅能回答阅读理解问题，还能在给定的段落中无法回答问题时选择放弃回答的能力上的表现。评估模型的指标是 F1 分数。

语言和使用方式

多语言？否

覆盖语言英语

许可证 cc-by-sa-4.0: 国际创意共享署名-相同方式共享4.0

预期使用方式构建模型使其了解在给定上下文中无法回答问题。此数据集可用于机器阅读理解、摘录型问答和问题生成等任务。

主要任务问题生成

交际目标给定输入段落和答案片段，目标是生成一个询问答案的问题。

鸣谢

数据整理组织类型学术

数据整理组织 Stanford University

数据集创建者 Pranav Rajpurkar，Robin Jia和Percy Liang

资助 Facebook和NSF研究计划奖学金，奖学金号：DGE-114747

将数据集添加到 GEM 的人是 (Abinaya Mahendiran)[ https://github.com/AbinayaM02] ，Manager Data Science, NEXT Labs ]

数据集结构

数据字段在所有拆分中都相同。

squad_v2

id：字符串特征。
gem_id：字符串特征。
title：字符串特征。
context：字符串特征。
question：字符串特征。
answers：包含以下内容的字典特征：
- text：字符串特征。
- answer_start：int32特征。

示例实例

这是验证数据点的示例。此示例太长，已经被裁剪：

{
    "gem_id": "gem-squad_v2-validation-1",
    "id": "56ddde6b9a695914005b9629",
    "answers": {
        "answer_start": [94, 87, 94, 94],
        "text": ["10th and 11th centuries", "in the 10th and 11th centuries", "10th and 11th centuries", "10th and 11th centuries"]
    },
    "context": "\"The Normans (Norman: Nourmands; French: Normands; Latin: Normanni) were the people who in the 10th and 11th centuries gave thei...",
    "question": "When were the Normans in Normandy?",
    "title": "Normans"
}