ITBear旗下自媒体矩阵:

百度机器阅读理解竞赛评审结束 最大、最具挑战性数据集获评“超赞”

   时间:2018-05-25 11:42:51 来源:互联网编辑:星辉 发表评论无障碍通道

近日,由中国中文信息学会(CIPS)、中国计算机学会(CCF)联手百度公司共同举办的“2018机器阅读理解技术竞赛” 圆满落幕。来自全球各地的1062支参赛队伍,在百度提供的中文阅读理解数据集基础上,对测试问题进行不断探索,使得参赛系统水平得到显著提升。大赛更多信息可登录2018机器阅读理解技术竞赛官网http://mrc2018.cipsc.org.cn/查看。赛后,获奖选手纷纷表示,百度向大众开放大规模中文阅读理解数据集意义深远。

共享优质数据集 百度直击行业数据缺失痛点

在机器学习领域,数据是机器学习的原料,也是推进行业结构转型升级的燃料,而对于个人研究者与高校学子来说,数据缺失成为研究的困境所在。作为最大的中文搜索引擎,百度在数据方面具有得天独厚的优势。2017年底,全球规模最大的“BROAD”百度AI公开数据集计划(Baidu Research Open-Access Dataset)正式启动,百度面向公众开放包括室外场景理解数据集、视频精彩片段数据集、阅读理解数据集3个数据集。

来自北京大学Dlib实验室的尹伊淳正是在阅读了百度DuReader数据集的论文后,才选择参与到本次百度机器阅读理解技术竞赛中的。这批公开的、大规模、高质量的真实数据集大大激发了他对于这项工作的兴趣,使得他在最终角逐中获得了总排名第二的好成绩。

本次机器阅读理解竞赛中百度提供给参赛者的,正是面向真实应用场景的大规模阅读理解数据集。该数据集是迄今为止最大的中文阅读理解数据集,其中包含来自百度搜索的30万个真实问题,每个问题对应5个候选文档文本,以及人工撰写的优质答案。东北大学自然语言处理实验室知识图谱团队在赛后表示,“数据集的开放使得机器阅读理解系统得以映射到真实的使用场景中。”对于机器阅读理解技术研究者而言,百度数据集弥合了国内的真实场景语料多文档阅读理解数据集的空白,也为加速AI产品落地带来了启示。更多数据集论文可登录https://arxiv.org/abs/1711.05073查看,供业界交流使用。

获奖团队好评如潮 百度数据集带来真实创想

在比赛中,选手们依托百度阅读理解数据集,参赛系统整体水平得到了显著提升。比赛期间排行榜高分不断刷新,ROUGE-L评价指标由最初的35.96提升至终赛的63.38,接近半数的系统结果超过了基线系统。

赛后,就百度数据集的数量与质量,本次机器阅读理解技术竞赛的获奖团队,给出了一致好评。选手们纷纷表示,面向真实场景的大型阅读数据集,为自然语言研究引入了宝贵的创想。

最终在竞赛中拔得头筹的北京奇点机智科技有限公司(Naturali)团队表示,此次比赛数据集聚焦于实用场景,问题来源于真实用户,类型多样,其中来源于真实网络文档的数据,有别于经过精心编辑的文档,更有利于机器阅读理解研究“从理想照进现实”。

面向高校开源不断 百度助力AI人才培养与升级

作为一名机器学习方向的研究生,来自上海理工大学的王忠萌选手此前的研究材料以各种英文数据集为主。竞赛中与百度数据集的交汇,点燃了他对中文机器阅读理解的兴趣。正如评测委员会成员刘凯所说,此次竞赛提供的数据,将帮助参赛者挖掘更多中文阅读理解问题,同时更深入地接触到实际的应用需求,最终起到引导参赛者关注中文机器阅读理解的目的。

百度中文数据集的公开,只是百度数据集分享计划的一小部分。百度通过本次竞赛为学术界和工业界提供了一个公开的阅读理解技术交流平台,将大量优质的数据集与研究成果将触达到更多高校学子和企业研究人员,降低了AI研究的门槛,使得个人研究者也能积极参与到系统研发与调试中去。这不仅直接推进了AI技术的发展进度,还将大量潜在的AI人才吸引到行业之中,培养与成就更多中国人工智能领域的精英技术人才,打造优良的行业生态。

举报 0 收藏 0 打赏 0评论 0
 
 
更多>同类资讯
全站最新
热门内容
网站首页  |  关于我们  |  联系方式  |  版权声明  |  网站留言  |  RSS订阅  |  违规举报  |  开放转载  |  滚动资讯  |  English Version