让AI用事实说话,千言第二届面向事实一致性的生成评测比赛启动
发布日期:2023-01-12T08:58:24.000+0000 浏览量:751次
火遍全网的ChatGPT让人惊叹全球热点技术AIGC(AI Generated Content,人工智能内容生成)的迅速发展,它似乎能够理解和产生复杂的想法,可以回复各种问题,进行有逻辑的对话,可以创作剧情完整的推理小说,甚至能够编写代码,回复丝滑流畅,效果超出预期。但ChatGPT目前仍然无法胜任要求事实准确性的任务,比如新闻报道、财务报告等。
由于神经网络生成模型特别是预训练语言模型的迅速发展,机器生成文本的可读性和流畅性不断提升。然而,自动生成的文本中依然经常出现不符合原文或背景的错误事实描述,这种
生成的事实一致性问题
是自然语言生成技术进行落地应用的主要障碍之一。
2022年12月30日,百度联合中国中文信息学会自然语言生成与智能写作专业委员会、清华大学、哈尔滨工业大学(深圳)共同发起了第二届“
千言:面向事实一致性的生成评测竞赛
”,以进一步提升自然语言生成的研究水平,推动相关技术的应用发展。赛事为获奖团队提供丰厚的奖金,并将在2023年7月第二届中国自然语言生成与智能写作大会(NLGIW 2023)进行颁奖。
赛题设置
本次赛事将提供三个对事实一致性有较高要求的生成任务,包括
文案生成
、
摘要生成
和
对话生成
,同时在系统评价中结合文本流畅性和事实一致性两项指标综合评估参赛生成系统的水平,并进一步提升事实一致性评测指标的先进性和丰富性。
此外,本次竞赛为参赛选手提供基于飞桨框架PaddlePaddle和PaddleNLP的开源基线系统,提供丰富的高层API,全面支持动态图开发模式,从开发、训练到预测部署提供优质的整体体验。
赛事日程
赛事奖项
比赛组织