ADL100(2)-Wuwei-检索式对话

2024-07-04 07:18:51

1. 检索

　　1）（单轮回复选择）匹配模型

　　　　a. sentence 生成定长向量进行匹配 f(g(Q), g(R))

　　　　　　f和g各种变种

　　　　　　f: MLP Neural Tensor Cosine

　　　　　　g: CNN LSTM+Att

　　　　b. query 与 candidate response 匹配

　　　　　　g: Interaction Representation(Att / Sim)

　　　　c. 效力和效率

　　2）多轮回复选择

　　　　a. 挑战：

　　　　　　层次结构：word->utterance->session

　　　　　　信息冗余

　　　　　　逻辑：句子的顺序？词句长期依赖，适合句子的约束

　　3）knowledge enhanced

　　方向：deep wide pre-training -> hhh yes

　　Learning method

　　　　from unlabelled data （weak supervision）（acl 18）

　　　　denoise with Peer （co-teaching） (两个网络互相加权，互相trach acl19)

　　　　　　teach with dynamic margin

　　　　　　teach with dynamic instance weight

　　　　　　teach with dynamic data curriculum(选高置信度的)

　　Summary:

　　　　matching model

　　　　two framework

　　　　　　vec -> match

　　　　　　rep -> math -> aggregation

　　　　external knowledge

　　　　Deep, wide(better representation), learning method

　　　

　　　　

转载于:https://www.cnblogs.com/zh-liu/p/ADL100-2-Retrival-Chat.html

ADL100(2)-Wuwei-检索式对话相关推荐

NLP.TM[38] | 对话系统经典：检索式对话
[NLP.TM] 本人有关自然语言处理和文本挖掘方面的学习和笔记,欢迎大家关注. 往期回顾 NLP.TM[32] | 浅谈文本增强技术 NLP.TM[33] | 纠错:pycorrector的错误检测 ...
对话系统（任务型、检索式、生成式对话论文与工具串讲）
Motivation 对话是一个很大的概念,有非常非常多的子问题,刚入坑的小伙伴很可能迷失在对话的一小块区域里无法自拔,本文就是为解决这一类问题的.希望读者在看完本文后,可以理清楚对话的每个概念为什么 ...
小哥哥，检索式chatbot了解一下？
来自夕小瑶的卖萌屋作者夕小瑶喵喵喵,一不小心又匿了三个月,突然诈尸害不害怕(￣∇￣) 小夕从7月份开始收到第一场面试邀请,到9月初基本结束了校招(面够了面够了T_T),深深的意识到今年的对话系 ...
史上最通熟易懂的检索式聊天机器人讲解
喵喵喵,一不小心又匿了三个月,突然诈尸害不害怕(￣∇￣) 小夕从7月份开始收到第一场面试邀请,到9月初基本结束了校招(面够了面够了T_T),深深的意识到今年的对话系统/chatbot方向是真的超级火呀 ...
基于ElasticSearch+文本相似度模型的检索式智能对话方案
目录背景为什么只用ES相似度匹配不行解决同一意图不同表达的问题 "粗筛"+"精选"的意图匹配方案另外一种思路: 背景在对话系统领域,检索式对话系统一直 ...
对话系统-“问答型”单轮对话：FAQ检索式对话系统【步骤：①用户意图判断、②文本检索召回、③文本匹配计算排序】【搜索引擎的最终形态】
一.基本概念文本匹配:计算文本之间的相似度,主要分为两大类: 1)基于句子向量表示的相似度模型(适合初始召回): 2)基于词级别匹配的相似度模型(适合对召回结果重排) 问答系统:信息检索的一种高级形 ...
闲聊机器人实例四:python实现小姜机器人（检索式chatbot_sentence_vec_by_bert_bert句向量）
bert构建生成句向量,再计算相似度,匹配问答库中的标准问题.为什么使用bert倒数第二层输出构建句向量. 小姜机器人.python.tensorflow.chatbot.dialog.bert中文短 ...
闲聊机器人实例二:python实现小姜机器人（检索式chatbot_fuzzywuzzy）
小姜机器人.python.tensorflow.chatbot.dialog.fuzzywuzzy.搜索.检索式.生成式.聊天.闲聊.对话.问答.多轮.单轮.开放.封闭.任务.垂直等等描述,都属于自动 ...
闲聊机器人实例三:python实现小姜机器人（检索式chatbot_sentence_vec_by_word_词向量句向量）
word2vec词向量构建生成句向量,再计算相似度,匹配问答库中的标准问题. 小姜机器人.python.tensorflow.chatbot.dialog.fuzzywuzzy.检索式.生成式.聊天. ...
FAQ 检索式问答系统学习记录
介绍 1. 背景场景:假设有一个标准的问题库,此时有一个新 query 进来,应该做什么操作? 灵魂三连问: 如何根据这个 query,你怎么返回一个标准答案呢? 如何从问题库里面找答 ...

最新文章

热门文章