博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
谷歌发布自然问答数据集 Natural Questions
阅读量:6201 次
发布时间:2019-06-21

本文共 669 字,大约阅读时间需要 2 分钟。

用于训练和评估开放领域(Open-domain)问答系统的大型语料库 Natural Questions(NQ)。该数据集包含了 30 万个自然产生的问题和对应的回答注释,每个回答都是人工从维基百科页面找到的答案。另外,Google 还举办了挑战活动,以 NQ 数据集训练的模型性能来生成。

开放式域名问答(QA)是自然语言理解(NLU)中的一项基准任务,旨在模仿人们如何查找信息,通过对问题的阅读和理解找到问题的答案。例如,用自然语言表达的问题(“为什么天是蓝色的?”),QA 系统应该能够阅读网页(比如这个维基百科页面 )并返回正确的答案,虽然答案有点复杂和冗长。

然而,目前并没有大量公开可用的自然产生问题(即寻求信息的人提出的问题)和可用于训练评估 QA 模型的答案。原因是汇集用于问答的高质量数据集,需要大量的实际问题来源以及寻找问题答案的大量人力。

而现在谷歌发布的自然问答数据集 Natural Questions 可以说是填补了这部分资料的空白。简单来说,就是 Google 收集自家搜寻引擎真实的问题查询,搭配维基百科的资料,为问答系统提供训练资料集。这个过程中,进行匿名查询的注释者需要阅读整个维基百科页面,来寻找答案并提供两种答案注释,包括涵盖所有资讯的长答案和简洁的短答案。

目前,收集了 30 万个自然产生的问题与答案,注释的品质精准度达 90%,另外,Natural Questions 还包括 1.6 万个范例,每个问题的答案由 5 个不同的注释者提供。Google表示,这种资料可以用来评估问答系统的性能。

转载地址:http://scxca.baihongyu.com/

你可能感兴趣的文章
ListView
查看>>
linux修改ftp上传路径
查看>>
【C语言】第一个C语言小程序 —— 日期算法和万年历
查看>>
eclipse中svn插件在线安装方式
查看>>
js 的 this
查看>>
Cetnos搭建vsftp服务器
查看>>
Js数据类型、Json格式、Json对象、Json字符串
查看>>
C# 特性篇 Attributes
查看>>
隐藏sharepoint列表栏
查看>>
Effective java 读书笔记
查看>>
【学习】在Windows10平台使用Docker ToolBox安装docker(一)
查看>>
JVM调优总结 -Xms -Xmx -Xmn -Xss
查看>>
ZOJ 3913 Bob wants to pour water
查看>>
PAT (Advanced Level) 1036. Boys vs Girls (25)
查看>>
克拉默法则(Cramer's Rule)的证明
查看>>
(转)解释一下SQLSERVER事务日志记录
查看>>
移动端关于拖拽事件
查看>>
mysql5.6.36 源码安装过程
查看>>
Openresty配置文件上传下载
查看>>
JavaScript instanceof 运算符深入剖析【转载】
查看>>