东方耀AI技术分享

 找回密码
 立即注册

QQ登录

只需一步,快速开始

搜索
热搜: 活动 交友 discuz
查看: 2726|回复: 0

[学习笔记] 007、倒排表做层次过滤与noisy channel model

[复制链接]

1365

主题

1856

帖子

1万

积分

管理员

Rank: 10Rank: 10Rank: 10

积分
14418
QQ
发表于 2019-10-14 21:43:51 | 显示全部楼层 |阅读模式
007、倒排表做层次过滤与noisy channel model


基于检索的问答系统的缺点:
1、每个问题进来都需要去与知识库中的问题计算相似度 如果知识库中问题对很多,时间复杂度很高,达不到实时
解决思路:层次过滤思想


如何过滤:倒排表技术(来源于搜索引擎)
过滤器1:至少包含其中的一个单词
过滤器2:至少包含其中的两个单词


要满足:O(过滤器1) < O(过滤器2) < O(相似度计算)


开始语言模型之前 :noisy channel model






东方老师AI官网:http://www.ai111.vip
有任何问题可联系东方老师微信:dfy_88888
【微信二维码图片】

01.png
02.png
03.png
04.png
05.png
06.png
07.png
让天下人人学会人工智能!人工智能的前景一片大好!
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

QQ|Archiver|手机版|小黑屋|人工智能工程师的摇篮 ( 湘ICP备2020019608号-1 )

GMT+8, 2024-3-29 21:30 , Processed in 0.192060 second(s), 22 queries .

Powered by Discuz! X3.4

© 2001-2017 Comsenz Inc.

快速回复 返回顶部 返回列表