Deberta-v3-xsmall-squad2

什么是SQuAD？

Stanford Question Answering Dataset（SQuAD）是一个阅读理解数据集，由众包工作者在一组维基百科文章上提出问题，每个问题的答案是相应阅读段落中的一段文本或片段，问题也可能无法回答。

SQuAD2.0将SQuAD1.1中的10万个问题与超过5万个由群众工作者敌对地编写的不可回答的问题相结合，这些问题与可回答的问题看起来相似。要在SQuAD2.0上表现良好，系统不仅必须在可能时回答问题，还必须确定段落中没有支持的答案，并且在回答时放弃回答。

推理

from transformers import pipeline

qa = pipeline("question-answering", model="nlpconnect/deberta-v3-xsmall-squad2")

result = qa(context="My name is Sarah and I live in London", question="Where do I live?")

准确性

squad_v2 = {'exact': 79.392,
   'f1': 82.674}
   
squad = {'exact': 84.925,
   'f1': 91.620}