着眼两大核心应用问题 2018 SMP 第二届中文人机对话技术评测顺利落幕 (两个核心是)
雷锋网 AI 科技评论按：由中国中文信息学会社会媒体处理专委会主办、哈尔滨工业大学承办的第七届全国社会媒体处理大会（SMP 2018）于 2018 年 8 月 2 日- 4 日在哈尔滨召开。雷锋网作为独家战略媒体带来专题报道。
对话是人机交互最为流畅且自然的一种形式，因此人机对话成为自然语言处理的一个重要研究方向。以微软小冰、Siri 为代表的人机对话产品也作为产业界的代表应用迅速发展。与之相应地，人机对话的技术评测也成为了高校及企业技术的「练兵场」。
8 月 4 日下午，SMP 2018 第二届中文人机对话技术评测（The Second Evaluation of Chinese Human-Computer Dialogue Technology，SMP-ECDT) 的颁奖仪式及技术报告论坛顺利召开。
本届 SMP-ECDT 由中国中文信息学会社会媒体处理专委会主办，承办方包括哈尔滨工业大学和提供数据支持的科大讯飞股份有限公司，此外华为公司提供奖金支持。SMP 2018 技术评测委员会组织架构包括主席张伟男（哈尔滨工业大学），委员陈志刚（科大讯飞股份有限公司）、车万翔（哈尔滨工业大学）及张轶博（华为公司）。
本届 SMP-ECDT 技术评测沿袭上一年的赛制，分为用户意图领域分类及任务型人机对话在线评测两个任务。
用户意图领域分类（任务一）针对闲聊类和任务类两大类领域（domain），要求系统将用户在单轮对话的输入分类对应到相应的领域中；其中，任务类又细分为 30 个垂直领域。
在人机对话的应用过程中，只有正确判断用户的意图，并正确进行划分，才能进一步返回正确的回复结果。在本任务中，参赛者可以开放地获取除主办方提供的数据之外的训练及开发数据；主办方提供给定测试集，并运行参赛系统，在测试集上面得出评测结果。评价标准包括准确率（P）、召回率（R）及 F 值。
任务型人机对话在线评测（任务二）则涵盖机票类、火车票类、酒店类 3 个垂直领域，系统通过与测试人员实时在线对话完成相应的预定或查询任务。
整个评测过程对不同的参赛系统均给定相同的首轮对话输入，评测员根据给定的完整意图描述与参赛系统进行交互直至对话结束；系统返回所有任务（单任务或多任务）的执行结果，此外，如果单个任务在 30 个对话轮数之后仍未返回测试员所需的结果，则对话测试结束。评价指标包括任务完成率、对话轮数、用户满意度、回复语言的自然度及资源未覆盖情况的引导能力等五大领域。
SMP-ECDT 技术评测从 2018 年 4 月 1 日启动，历经近五个月的赛程，最终吸引了 80 支队伍共 248 位参赛者报名，相较去年第一届技术评测有了一定程度的提升。值得一提的是，来自工业界的队伍比重相比去年有所增加，SMP 2018 技术评测委员会主席、哈尔滨工业大学张伟男博士表示，这从一个侧面上反映了工业界对人机对话技术的关注度在不断提高，技术水平也在不断进步。
SMP-ECDT 技术评测于 7 月 23 日公布评测结果，详情如下：
尽管评测主题相比去年并没有明显变化，但张伟男博士向雷锋网 AI 科技评论介绍，两个任务都采用了新的数据集，且任务一的测试集规模更大，提升了技术评测的任务难度。
与之相应地，任务一参赛队伍的整体指标相比去年有所下降。不过，技术评测委员会也从中看到了参赛团队的进步。
「我们看到了最近比较火的基于 T2T 的 Transformer 模型应用在了任务一的参赛系统中，并且取得了第一名的成绩，相比于 LSTM，Transformer 仅利用 multihead 的 attention 技术，模型整体更加简单高效，同时我们还看到了 FastText 在数据预训练及获取词汇 embedding 上的应用及取得的成绩。」
而任务二除了采用全新数据集外，也参考去年所遇到的一些测试问题做出了修正。令评测委员会感到欣喜的是，今年任务二的任务完成率和平均话轮数两个主要指标有了明显的提升，张伟男博士表示，「这无疑标志着人机对话技术在过去的一年中，起码在我们这个任务中，有了较大的进步，让我们对后续的进展充满了信心和期待。」
从去年开始，SMP 技术评测委员会在刘挺老师和蒋盛益老师的支持下，于 SMP 大会上连续举办两届中文人机对话技术评测，开创先河。张伟男博士介绍道，在制定评测内容的过程中，委员会认为不仅要考虑人机对话研究上的热点，更应该考虑人机对话在实际应用中的关键核心问题。「经过多次讨论我们确定了两个评测任务，即用户意图分类和在线人机对话实时评测。经过两届的评测，我们欣喜地看到了人机对话技术在这两个任务上的进步，同时也发现了一些问题，如模型的领域迁移问题。」
结合各个团队在比赛过程中暴露的共同问题，评测委员会在未来调整评测重点及后续方案的制定。张伟男博士也表示，在未来，他们也将规划与真实应用场景的结合，如手机助手、智能音箱等，让参赛队伍能在实践中及时获得反馈并做出调整，这也有益于推动人机对话技术的进步与落地。
SMP2018中文人机对话技术评测（ECDT）：
原创文章，未经授权禁止转载。详情见 转载须知 。
中华网军事频道解读国际政治军事战略格局，见证中国国力军力的腾飞，坚守民族信念与真理，与亿万网友一起守土尽责，缔造中国爱国者的精神家园，共同推进世界和平。主要有以下栏目：军事新闻、每日军情参考、台海形势、中国军情、国际军情、军事专题、网友原创、军事视频、军事图库。
海安志达教育—(原海安党校电脑培训部)国家CEAC认证海安培训中心、开设有电脑培训：办公软件培训、平面广告设计、网页设计、Cad制图、网络维修、室内装潢、PS美工培训、学历教育：成人高考、自学考试大专、本科等培训课程以及各种职业资格证书。提供软件开发，网站设计、小程序，广告设计等服务。热线:0513-88181168
优质mobi,epbu,azw3,pdf,kindle电子书,电子书下载,电子书网站
理财资讯网是一个汇集了个人理财、理财产品、理财风险、投资理财的网站，为想要了解理财的你提供更多有关理财的信息资讯。
第1新能源车网是中国最具影响力的客车专业网站，聚焦客车客运及全产业链的最新政策、重大事件，为您呈现独家权威数据分析、深度市场调查研究、道路运输管理探讨、未来发展前景展望，全面涵盖新能源、公路客运、城市公交、旅游、团体租赁、校车、物流车、房车、共享出行等细分市场。
成都仕光环保设备有限公司是一家专业研发、生产和销售大型场所降温及通风设备的公司，公司主要产品有：各型冷风机(环保空调),各型负压风机及风柜，降温水帘，油烟净化器等。我司自主研发的“仕风”牌系列环保空调、负压风机，以其节能、环保、低投入、多效能的产品优势广受客户欢迎。
写字楼入驻企业查询、分析，通过当地写字楼入驻企业可视化数据分析图，帮助访问者查询当地写字楼入驻企业详细情况，包括写字楼城市各区域的分布情况、写字楼较集中的区域、新企业最多的区域、区域中入驻企业最多的写字楼分析数据。
剑灵私服发布网为广大玩家分享2024年最流行剑灵私服玩法技巧,剑灵sf图片,剑灵私服等文章;收集剑灵私服的玩家心得以及玩法技巧!
常州金坛市华勇机械有限公司自我开发研制出新一代全自动压片机、粉末成型机、花篮式压片机、粉末打锭机、系列全自动液压机等，具有性能稳定、效率高、成本低、省工、一人多机的特点，市场遍布全国各地并畅销东南亚及欧美市场。
威卢克斯（中国）有限公司AH空间解决方案打造健康舒适工作、生活空间
《奶牛镇的小时光》是一款开放式模拟乡镇生活手游，你可以建设梦幻农场，开荒种地，打造属于你自己的梦想庄园。
书格格致力于为广大书友推荐各种类型好看的小说，包括有言情小说、都市小说、历史小说、科幻小说、灵异小说、军事小说、悬疑小说、玄幻小说、武侠小说、末世小说等。看小说，找小说就上书格格小说推荐网！
8月3日，小米电视官方微博发布消息称，，小米巨屏风暴即将来袭，，暗示小米巨屏电视新品将于8月4日发布，ZNDS智能电视网获悉，截至2023年7月，小米已发布RedmiMAX系列电视，98英寸和86英寸，、小米大师系列86，MiniLED电视、小米ESPro电视，86英寸和90英寸，等多款超大屏电视产品，另外，小米电视同步官宣，2023...。
涵品教育CEO创始人王人杰12月14日，2021，回响中国，腾讯教育高峰论坛在北京富力万丽酒店举行，论坛以，绽放初心筑梦未来，为主题，结合宏观政策和行业变化，邀请教育行业的学者、教育家、教育机构负责人共同对教育机构普遍关心的热点问题进行解读和讨论，寻找教育发展方向和自身发展新定位，分享过去一年的成功经验和案例，分析面向未来教育的机遇，...。
当天，国庆长假正式开启，但出行高峰早在昨日，9月30日，，甚至前日就开局了，9月30日下午，，路上已长满了放假痴呆人，还没任务好友圈就曾经堵了，四川高速堵成红锅了，等话题继续冲上热搜，引发热议，面对国庆出行长时期堵车囧况，不少自驾族怪罪不怪，以温和心态应答，人在囧途，，惹起不少网友点赞，车祸猛于虎，交警部门提示，国庆假期如遇长时期...。
化工油罐车运输食用油事情近日引发关注，廊坊市市场监视治理局7月9日向第一财经记者回应称，目前事情，罐车化工油食用油混装事情，由三河市政府正在考查中，后者会发布最终考查结果，第一财经记者栾立，关系报道评论丨化工油食用油，混运，，要黑名单更要问责清单，红星资讯，日前，关于罐车运输的乱象被曝光，媒体考查发现，有的罐车卸完煤制油间接装食用油...。
官方是官方网站的简称，普通指的是公司的，官方，网站，官方网站是地下集团主办方表现其意志想法，集团消息地下，并具备威望、地下性质的一种网站，官方网站是地下集团主办者，表现其意志想法，集团消息地下，并带有公用、威望、地下性质的一种网站，网站亮证网站亮证是指持有，官方网站认证证书，和，官方网站认证标记，的企业网下身份认证资质，将证书标记悬挂...。
在日本外乡，他的标记就是经常使用艺术化了的X就是你说的叉叉，那个叉叉是字母X的艺术化了拿来做锐志的标记的，而在国际消费后称号叫锐志REIZ，国产经常使用的就是丰田标记你见到的应该是出口车或许是有的人买了国产锐志，丰田锐志REIZ是日本丰田MARKX车型国产后的称号，它于2005年10月在天津一汽丰田二厂与皇冠共线消费共用底盘，装备与皇...。
每经记者陈星许立波每经编辑陈俊杰近日，两名中国医疗器械行业资深人士赴菲律宾调查业务，被绑架后遇害的事情引发宽泛关注，7月2日上午，，每日经济资讯，到来受益人之一夏某某生前所在的润迈德医疗科技有限公司，以下简称润迈德医疗，，看到员工在反常下班，但办公场地内可见的员工不多，记者从多位医械行业外部人士处了解到，该案件内行业内形成了相当大的负...。
您有一笔现金可提现到银行卡，白用30天，你不还钱，就算了，当作福利送你了，……据，法治日报，报道，当下网贷广告简直无处不在，既包含正轨网贷机构的宣传，也不乏一些无资质网贷中介经过虚伪宣传诱导生产者存款，其中还存在一些不合乎监管要求、不实际践的，离谱，广告，随着互联网金融的极速开展，各类网贷平台应运而生，仰仗着门槛更低、放款更快的便...。
这个有点不靠谱，如今都不准许收押金的，这个属于违法的，58同城上武汉汇睿英才颁布的任务是骗局吗首先武汉这个汇睿英才所发的一切招聘消息，倡导大伙千万别去，相对的坑，由于天底下没有收费的午餐给你去吃，假设，你有脑子，就自己去找事件做！找任务这个物品不要置信网上所颁布的，轻轻把你往坑里拽，你还不知道，具体给你引见汇睿，英，才是个啥样的中介公...。
是国产品牌，北汽个人是北京汽车工业个人总公司的简称，公司开展环节中教训了两次改名，2000年9月份改名为北京汽车工业控股有限责任公司，2010年11月，改名为北京汽车个人有限公司，北汽是什么性质的公司类型公司类型为国企，是由多家公司独特动员，其中包含北京汽车个人有限公司，北京市国有资产运营有限责任公司，北京国有资产运营治理核心，北京首...。
星球工匠修改器由MrAntiFun制作分享，这款科幻风的生存建造游戏七项修改器，可以修改人物生命，氧气，口渴度。快速制作和建造各种道具设施
地震虽然被称为天灾，它所造成的伤害早已不需要小编多讲，作为天灾，却在很多地方都有活跃，文中为大家盘点了世界史上最强的十大地震，榜一的地震震级达到9.5。
一百三十二位80后企业家财富达到超过20亿元，比去年多三十三位，其中白手起家的比例为38%，与去年基本一致，五十位80后白手起家创业者财富超过20亿，比去年多十三位，主要来自在线游戏、区块链、先进制造业、互联网服务、教育和娱乐行业，其中，拼多多CEO黄峥首次上榜，创业仅三年便以950亿财富成为80后白手起家新首富，是史上最快达到近千亿...。
2016年6月12日，佛罗里达州奥兰多一家名为，脉搏，Pulse，的同志酒吧发生的一起大规模枪击案，共造成约50人死亡，53人受伤，这是美国历史上最严重的大规模枪击事件，初步认定行凶者为29岁的美国公民奥马尔·马丁，OmarMateen，，其父母为阿富汗移民，事后，Facebook在宣布启用，SafetyCheck，安全确认，功能...。
表面上看，美容行业有着呈现者较好的发展趋势，并且，不断有人想要代理美容店产品，市面上美容店产品众多，对这部分有代理想法的人来说，要先知道做美容店产品代理价是多少，再来判定自己要代理哪一个美容店产品，不同的美容店内的产品，其代理价自然也不一样，因此，小编将以介绍为例，来解答关于做美容店产品代理价是多少的疑问，品牌正式成立于2008年，发...。
3月7日，疑似一加Ace3V的真机谍照出炉、新机拿到入网备案、闲聊站也在同日放出了线稿，它应该会是首发新神U骁龙7，Gen3的机器，这红绿灯相机排列，又像小米9，又像魅族16s，又像下面会提到的iPhone16系列，但讲真，不如前代靓仔↓一加Ace3V现有爆料，机型名PJF110，首发骁龙7，Gen3，SM7675，1.5K屏，没用...。
发表在当贝投影仪2024，6，1713，12618活动正在如火如荼的进行中，各大投影品牌都争相推出大量优惠活动和新品投影，这其中，当贝X5S激光投影仪在众多品牌中脱颖而出，登顶京东投影竞速排行榜，在投影产品总榜中成功登顶，荣获第一！当贝投影目前为家用智能投影行业头部品牌，洛图科技，RUNTO，线上数据显示，2023年，当贝投影在线上市...。
