您的位置:   网站首页    行业动态    第三届CCL“讯飞杯”中文机器阅读理解评测研讨会圆满落幕

第三届CCL“讯飞杯”中文机器阅读理解评测研讨会圆满落幕

阅读量:3609803 2019-10-20



由中国中文信息学会计算语言学专委会(CIPS-CL)主办,哈工大讯飞联合实验室(HFL)承办,科大讯飞股份有限公司冠名的第三届CCL“讯飞杯”中文机器阅读理解评测研讨会(CMRC 2019)于2019年10月19日在云南昆明圆满落幕。从2017年开始,全国计算语言学学术会议(CCL)计划举办评测活动。作为CCL大会的始创评测,哈工大讯飞联合实验室已连续承办两届中文机器阅读理解评测。本届CMRC 2019评测研讨会与第十八届全国计算语言学学术会议(CCL 2019,2019年10月18日~20日)共同召开,旨在通过每年的中文机器阅读理解评测,与相关领域学者共同推进中文机器阅读理解的技术水平,为相关学者提供交流的平台。本届评测研讨会主席由哈工大讯飞联合实验室主任、哈尔滨工业大学刘挺教授、科大讯飞AI研究院资深研究员崔一鸣担任。
CMRC 2019评测研讨会于2019年10月19日下午13:30准时开始。首先,由CMRC 2019评测联合主席崔一鸣对本届评测的概况进行了介绍。不同于往届评测,本届评测提出了一个全新的阅读理解任务,进一步丰富了阅读理解任务的多样性。本届评测的任务是句子级填空型阅读理解(Sentence Cloze-style Machine Reading Comprehension, SC-MRC)。这项任务需要将候选句子填入带有空缺的篇章中,形成一篇完整的篇章,这不仅需要正确判断候选句子中哪些属于原文以及哪些不属于原文,还要按照顺序正确的填入原文,进一步考查了模型对于句子级上下文的建模与理解,更加具有挑战性。本届评测共分为资格赛、决赛、专家评审三个环节。本届评测首次引入了专家评审环节,参赛单位不仅需要在客观评测指标中取得优异成绩,还需要通过现场答辩的形式从不同角度剖析评测系统。答辩委员会由五位专家组成,其中答辩委员会主席由清华大学孙茂松教授担任,答辩专家包括大连理工大学林鸿飞教授、哈尔滨工业大学车万翔教授、复旦大学邱锡鹏副教授、科大讯飞崔一鸣研究员担任。
CMRC 2019评测主席崔一鸣作评测总结报告
总结报告结束后进入到现场答辩环节,由各个答辩单位逐一上台介绍各自的评测系统。答辩委员会专家根据任务理解、系统设计、技术创新、实验结果、语言学分析这五个方面对参评单位进行打分,并且针对报告内容提出了建设性的问题和指导建议。





答辩委员会评审专家





决赛入围单位进行现场答辩
在经过得分统计后,由答辩委员会主席、清华大学孙茂松教授宣布获奖名单,并由答辩委员会的专家为获奖单位颁奖。CMRC 2019评测获奖单位如下:冠军:平安金融壹账通
亚军:顺丰科技有限公司
季军:6ESTATES PTE LTD,中金公司,哈工大&汉仪字库
答辩委员会主席、清华大学孙茂松教授宣布获奖名单各获奖单位将获得由中国中文信息学会计算语言学专委会颁发的荣誉证书。同时,各获奖单位将获得由科大讯飞股份有限公司提供的奖金,其中冠军将获得奖金两万元人民币,亚军将获得奖金一万元人民币,季军将获得奖金五千元人民币。
孙茂松教授为冠军单位平安金融壹账通颁奖
林鸿飞教授为亚军单位顺丰科技有限公司颁奖

车万翔教授、邱锡鹏副教授、崔一鸣研究员为季军单位6ESTATES、中金公司、哈工大&汉仪字库颁奖
随着颁奖典礼的结束,第三届“讯飞杯”中文机器阅读理解评测研讨会圆满结束。CMRC 2019评测委员会再次感谢各参赛单位对于本届评测的大力支持。感谢参加评测研讨会的各位专家以及与会来宾。
>
关于哈工大讯飞联合实验室(HFL)哈工大讯飞联合实验室(HFL)是科大讯飞针对“讯飞超脑”项目计划,重点引进和布局的核心研发团队之一,由科大讯飞AI研究院与哈尔滨工业大学社会计算与信息检索研究中心(HIT-SCIR)共同创办。根据联合实验室建设规划,双方将在语言认知计算领域进行长期、深入合作,具体开展阅读理解、自动阅卷、类人答题、人机对话、语音识别后处理、社会舆情计算等前瞻课题的研究。重点突破深层语义理解、逻辑推理决策、自主学习进化等认知智能关键技术,支撑科大讯飞实现从“能听会说”到“能理解会思考”的技术跨越,并围绕教育、司法、人机交互等领域实现科研成果的规模化应用。
 原文、编辑:CMRC 2019评测委员会

在线QQ咨询,点这里

QQ咨询

微信服务号