[学习笔记] 007、倒排表做层次过滤与noisy channel model

1365 主题	1856 帖子	1万积分

管理员

Rank: 10

积分: 14437

电梯直达

楼主

发表于 2019-10-14 21:43:51 | 只看该作者 |只看大图回帖奖励

|倒序浏览 |阅读模式

007、倒排表做层次过滤与noisy channel model

基于检索的问答系统的缺点：
1、每个问题进来都需要去与知识库中的问题计算相似度如果知识库中问题对很多，时间复杂度很高，达不到实时
解决思路：层次过滤思想

如何过滤：倒排表技术（来源于搜索引擎）
过滤器1：至少包含其中的一个单词
过滤器2：至少包含其中的两个单词

要满足：O(过滤器1) < O(过滤器2) < O(相似度计算)

开始语言模型之前：noisy channel model

东方老师AI官网：http://www.ai111.vip
有任何问题可联系东方老师微信：dfy_88888
【微信二维码图片】

01.png (522.84 KB, 下载次数: 200)