开发者社区> 问答> 正文

受到人类在学习新知识时的学习范式得到哪些启发?

受到人类在学习新知识时的学习范式得到哪些启发?

展开
收起
游客hmzk6xi5mlygs 2022-05-12 13:59:11 272 0
1 条回答
写回答
取消 提交回答
  • 我们提出了“预习-上课-复习”的三阶段训练范式来提升对话系统的性能,该范式能够像人一样预习时关注重点,上课时由易到难,复习时举一反三。具体来说,在预习阶段时,人一般会先了解重点概念、章节结构等信息,因此我们对应地设计了带有结构偏置的预训练目标,让模型学会对话数据中的槽值关联信息;在上课阶段时,人会从简单内容开始学习再逐步进阶到困难部分,因此我们使用了课程学习[1]的方法来训练对话模型;而在复习阶段时,人们通常是温故知新举一反三,因此我们专门设计了基于对话本体的数据增强方法,针对易错样例对模型进行加强训练。

    2022-05-12 16:55:47
    赞同 展开评论 打赏
问答地址:
问答排行榜
最热
最新

相关电子书

更多
关于《探索AIGC下的软件工程新范式》的联合声明 立即下载
EasyRL强化学入门与实践 立即下载
科学艺术 交相辉映 立即下载