返回信息流JD Dialog Challenge 全球首届任务导向多轮对话系统大赛方案
【大赛介绍】
京东作为中国最大的自营式电商,正在全面转型成为技术驱动型公司,致力于将人工智能技 术与商业场景应用相结合,全面拥抱无界零售,最终发展成为全球领先的、真正实现智能化 的商业体。通过打造端到端任务驱动型多轮对话系统,高效解决客户实际问题、提升客户购 物体验,一直是电商行业核心竞争力之一。本次大赛(http://jddc.jd.com)以对话系统在 京东客服场景中的真实应用为例,希望连结对话系统领域顶尖人才,与我们共同引领行业技 术发展潮流。 无论你是自然语言理解领域的资深大咖还是未来之星,只要你有兴趣和热情接受挑战,解决 人机对话中面临的难题,就有机会赢得令人心动的高额奖金和京东 Special Offer,开启人 机对话新时代!
【大赛流程】
4月15日 开始报名
5月30日 初赛启动
8月29日 决赛启动
9月27日 结果公布
10 月底 答辩及颁奖
【奖项设置】
一等奖 50 万+获奖证书(一支队伍)
二等奖 10 万+获奖证书(二支队伍)
三等奖 5 万+获奖证书(三支队伍)
单项奖 5 万+获奖证书(三支队伍)
最佳指导老师奖
【赛题简介】
学术上,人机对话是人机交互最自然的方式之一, 1950 年,艾伦·麦席森·图灵提出的“图
灵测试”,也一直被广泛认为是对机器的终极测试。产业上,京东也看到了这项前沿技术极
大的商业价值和无限的应用潜力,早在 2012 年就推出自主研发的对话型机器人 JIMI,给用户带来智能化、闭环式的购物咨询体验。今天,京东启动 2018 JD Dialog Challenge 大赛 (全球首届任务导向多轮对话系统挑战赛),旨在打造一个公平、开放的数据和技术平台, 引领业界和学界构建并提高对话系统各个环节的技术,最终使成熟技术服务于大众。 本次大赛以京东用户与京东人工客服脱敏后的真实对话数据为基础,参赛队伍需要给定的对 话数据进行分析,构建端到端的任务驱动型多轮对话系统,输出满足用户需求的答案,要求 该答案能正确、完整且高效地解决问题,为用户带来简单、省心、智能的购物咨询体验。
【评审委员会】
周伯文 京东集团副总裁 京东 AI 平台与研究部负责人
周 明 国际计算语言协会(ACL)候任主席 中国计算机协会、中文信息学会理事
孙茂松 清华大学计算机科学与技术系教授、党委书记 教育部在线教育研究中心副主任
吕文凯 京东集团副总裁 京东客户服务中心负责人
宗成庆 中国科学院自动化研究所研究员 亚洲自然语言处理学会(AFNLP)候任主席、 中国中文信息学会副理事长
马少平 清华大学计算机科学与技术系教授、智能技术国家重点实验室主任 中国人工智能学会副理事长
何晓冬 京东 AI 研究院常务副院长 京东深度学习与语音实验室主任
刘 洋 清华大学计算机科学与技术系副教授
孙 栩 北京大学信息学院研究员、博士生导师
刘 丹 京东高级技术总监 京东智能对话研发部负责人
郭 进 京东 AI 平台与研究部硅谷 Principal Scientist
【竞赛规则】【声明】
1、 大赛面向全球开放,个人、高等院校、科研单位、企业、创客团队等,不限年龄、国籍、 背景,人员均可报名参赛;
2、报名方式:登录官网 http://jddc.jd.com,点击“我要报名”,用京东账号登录完成个 人信息注册并验证邮箱,即可报名参赛(若无京东账号,须先注册;若为外籍人士,可通过 “国际站”入口注册京东账号);
3、 参赛者需确保提交的个人信息准确有效,所有的比赛资格及奖励发放均以提交信息为 准; 4、为保证公平性,每位选手只能同时加入一支队伍,禁止一人注册多个账号参赛,一经发 现立即取消参赛资格; 5、为保证公平性,大赛组织机构单位中涉及题目编写、数据接触的人员禁止参赛,京东集 团员工和赛事合办单位参赛,可参与排名,但不参与评奖及领取奖金; 6、禁止向未参赛者分享数据或代码,一经发现,情节恶劣者将取消参赛资格并追究法律责 任; 7、主办方会提供算法工程师作为大赛技术咨询顾问,全程陪伴,方便各位选手进行技术沟 通交流;
8、官网 http://jddc.jd.com 所提供的所有信息,都请以最新信息为准,大赛主办方保留对 竞赛数据、规则、流程修改和调整的权利,调整前会进行公告,敬请留意; 9、所有参赛选手必须遵守及签署《JD Dialog Challenge 竞赛选手报名协议》,更多声明细 节,请以此文件为准。
【组队规则】
1、选手既可以独立成队参赛,也可以创建团队或加入已有团队,多人参赛,每位选手只能 加入一支队伍,若需换队,请先退出当前队伍;
2、 创建团队时,自动成为该队队长,拥有管理团队(包括移除队员、解散团队)、邀请成 员的权利; 3、每支队伍拥有独立的邀请码,该队伍内所有成员均可使用该邀请码进行定向邀请;参赛 者输入准确的邀请码,即默认自动加入;
4、 队名的设定不得包含违反中国法律法规或公序良俗的词汇,一经发现会解散团队,队伍 创建后不支持修改队名,请创建时注意;
5、初赛开始前,队长可以管理队员,调整队伍,所有选手可选择随意加入/退出队伍,比赛 开始后,为防队伍数据混乱,各队伍不允许再加人,不支持队长解散团队; 6、本着完全尊敬并理解选手个人意愿的原则,大赛全过程中均支持退出比赛,但必须注意, 比赛开始后,若需退出,请告知您的队长及队员,若您为队长,请与队员商议后再进行决定, 若队长退出,第二名加入队伍的成员会自动成为队长; 7、对组队规则、大赛规则有任何问题,请联系 jddc@jd.com。
【赛题说明-任务描述】
给定背景 C={userID,productID,orderID},和对话片段 D={q0,a0,q1,a1, ...,qn-1,an- 1, qn},其中 qi 代表用户输入(可多个连续问句),ai 代表答案输出(可多个连续句)。 要求参赛系统对给定背景和对话片段进行分析,输出满足用户需求的答案 a。目标是 a 能够 正确、完整、高效地回答用户的问题。
【输入输出】
输入:背景 C 和对话片段 D;
输出:能解决用户问题的答案 a,初赛输出 an、决赛输出 ai(i≤19)。
【数据集】
竞赛数据包含百万级真实的京东客户与京东人工客服的对话记录片段。数据集按 8:1:1 划 分为训练集、开发集和测试集。报名参赛队伍才能获取数据集在线使用权限。
【评价方法】
预赛评测方法: 参赛队伍的对话系统提交京东评审小组,工作人员运行系统并输入测试集, 输出结果采用 deltaBLEU 方法进行全自动评测。在测试集中,每个对话片段会配有 15 个人 工提取的答案,每个答案有相应的权重。参赛系统的答案会和每个人工答案计算 BLEU,最 终 deltaBLEU 的分为加权平均分。
决赛评测办法: 扩大进入决赛的队伍可使用的训练和开发数据集量级用于优化系统。决赛 时,工作人员同时运行参赛系统,后台评委人员用 20 套同样的对话主题开始输入问题,并 根据系统回答持续对话直到完成对话任务或者超出 20 轮时停止。评委人员和参赛系统双盲。
最终的得分是按照“任务完成率*50%+对话满意度*30%+任务完成效率*20%”产生。
【基线系统】
初赛启动后,您可以登录官网 http://jddc.jd.com,在“数据与环境”板块中下载基线系统。
【奖项设置】
奖金:
总奖池 101 万 人民币,包括:
A. 初赛
5 个周冠军,每个冠军队伍奖励 2000 元人民币。
B. 决赛
一等奖:一支队伍,奖励 50 万人民币,颁发获奖证书及奖杯; 二等奖:两支队伍,奖励 10 万人民币,颁发获奖证书及奖杯; 三等奖:三支队伍,奖励 5 万人民币,颁发获奖证书及奖杯; 单项奖:三支队伍,奖励 5 万人民币,颁发获奖证书; (单项奖将奖励给同样进入决赛,但无缘进入前六名的创新团队)
人才绿色通道:
A. 参加比赛并最终在决赛进入前6名的团队成员,都将进入京东高级人才库,获得世界500 强、国内顶级公司、各地政府和互联网行业知名企业的瞩目和争取;
B. 直通终面:决赛冠亚季军/单项奖团队,每队至少一名获得直通京东集团终面资格;
C. 免笔试:决赛所有团队,全队选手获得免笔试资格。
最佳指导老师奖:
最佳指导老师可优先获得京东 AI 青年学者访问申请资格。
这是一条镜像帖。来源:北邮人论坛 / ml-dm / #29336同步于 2018/4/29
该镜像源已超过 30 天没有更新,可能在源站已被删除。
ML_DM机器人发帖
【公告】【比赛】京东2018对话系统大赛 AI,总奖池101万
dylan2wang
2018/4/29镜像同步15 回复
订阅后,新回复会通过你的通知中心匿名送达。
9 条回复