新趋势和总结|学习笔记

简介: 快速学习新趋势和总结

开发者学堂课程【达摩院智能语音交互 - 人机对话技术浅析新趋势和总结】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址:https://developer.aliyun.com/learning/course/42/detail/961


新趋势和总结

 

内容介绍:

一、新趋势和总结

二、参考文献

 

一、新趋势和总结

CommonsenseQA: BERT+AMS + 5.5%

少量数据的快速领域自适应

从无结构数据中收集对话语料

多模态的人机对话 AI

在之前的内容中已经讲解了人机对话中两种常用的技术:任务驱动型的人机对话、检索式的人机对话。

但人机对话方向还有很多领域值得探索。有不少用户会经常觉得智能语音产品很笨,不能真正地沿用意图。

其中一个重要问题为人机对话AI缺乏了一些常识知识。最近提出了 AMS 方法,将常识领域知识引入了 BERT 模型,在 CommonsenseQA 的数据集上获得了5.5%的绝对准确率提升。

另外如何用少量数据的快速适应到一个新的领域,也是极为重要的一个研究方向,它能够帮助我们快速搭建一个新领域的人机对话系统。此外从无结构数据中收集对话语料能够帮助我们缓解训练神经网络模型、训练数据不足够的问题。多模态的人机对话例如同时考虑语音、视觉等多模态的一个人机对话也是一个研究方向。

 

二、参考文献

Chen, Q; Zhu, X.; Ling, Z.; Wei, S.; Jiang,H; and Inkpen, D.2017a.Enhanced LSTM for natural language inference.In Proceedings of the 55th Annual Meeting of the Association for Computational LinguisticsACL 2017,1657-1668.

Chen, Qian, and Wen Wang. "Sequential Matching Model forEnd-to-end Multi-turn ResponseSelection."ICASSP 2019-2019 IEEE International Conference on Acoustics, Speech and Signal

Processing (ICASSP)IEEE,2019.Chen, Q; Ling, Z; and Zhu,X.2018.Enhancing sentence embeddingwith generalized pooling. In Proceedings of the 27th International Conference on ComputationalLinguistics,COLING 2018,1815-1826.

Chen,Qian, Zhu Zhuo, and Wen Wang."BERT for Joint Intent Classification and Slot Filling." arXivpreprint arXiv:1902.10909(2019).

Chen,Qian, and Wen Wang. "Sequential Attention-based Network for Noetic End-to-End ResponseSelection." arXiv preprint arXiv:1901.02609(2019).

相关文章
|
数据采集 存储 运维
数据中台如何建设,如何选型?
数据中台往往是伴随企业数字化经营战略进行规划的,是企业企业战略中的重要部分,数据中台建设包含团队搭建、设备采购、平台开发/采购等,预期百万级至千万级启动资金以及每年数百万的持续投入,所以如何建设、如何选型成为数据中台建设首先要考虑的事项。
1478 0
数据中台如何建设,如何选型?
|
Kubernetes 调度 Docker
Kubernetes加入新节点,经验总结
Kubernetes节点加入,经验总结 kubeadm安装Kubernetes,实践记录。 参考:https://my.oschina.net/u/2306127/blog/1628082 Kubernetes主控节点建立后(方法参见上面的链接),就可以随时添加更多的工作节点进去构建更大的集群(minikube设计为单机开发使用,不能添加工作节点),容器实例可以在所有符合条件的node上调度运行,这是Kubernetes最为强大的功能。
3976 0
|
SQL 存储 关系型数据库
9 PostgreSQL 点对点多主表级复制-触发器篇|学习笔记
快速学习9 PostgreSQL 点对点多主表级复制-触发器篇
9 PostgreSQL 点对点多主表级复制-触发器篇|学习笔记
|
机器学习/深度学习 弹性计算 编解码
阿里云服务器CPU内存带宽系统盘配置选择全流程
阿里云服务器ECS实例规格、轻量应用服务器选择,CPU内存配置选择、公网带宽以及系统盘选择攻略
679 0
阿里云服务器CPU内存带宽系统盘配置选择全流程
|
JSON 小程序 JavaScript
微信小程序开发之城市定位
微信小程序开发之城市定位
558 0
微信小程序开发之城市定位
|
存储 缓存 小程序
【小程序】一文读懂微信小程序登录流程及获取手机号
【小程序】一文读懂微信小程序登录流程及获取手机号
1095 0
【小程序】一文读懂微信小程序登录流程及获取手机号
|
负载均衡 NoSQL 调度
综合项目:Keepalived+Redis+Haproxy 实现主从热备、负载均衡、秒级切换
综合项目:Keepalived+Redis+Haproxy 实现主从热备、负载均衡、秒级切换
1133 0
综合项目:Keepalived+Redis+Haproxy 实现主从热备、负载均衡、秒级切换
|
SQL 存储 弹性计算
互联网、游戏等行业实时数仓构建最佳实践
互联网、游戏等行业客户基于Flink构建实时数仓,通过Logtail采集日志,使用Flink实现对日志的拆分、处理。
868 0
互联网、游戏等行业实时数仓构建最佳实践
SAP PM 初级系列23 - IW22 事务代码里创建维修工单
SAP PM 初级系列23 - IW22 事务代码里创建维修工单
SAP PM 初级系列23 - IW22 事务代码里创建维修工单
|
数据采集 Python
python爬虫设置请求头headers
python爬虫设置请求头headers
2625 0