elasticsearch原理学习笔记

https://mp.weixin.qq.com/s/dn1n2FGwG9BNQuJUMVmo7w

感谢，透彻的讲解

整理笔记

请说出唐诗中包含前的诗句

......

其实你都会，只是想不起来，

“窗前明月光”

因为在你大脑中的索引方式是

静夜思---床前明月光，疑是地上霜，举头望明月，低头思故乡

这就需要 倒排索引

倒排索引就是前---窗前明月光

　　　　　　　前--遥望瀑布挂前川

　　　　　　　。。。。。。

那样就意味着所有的文字都要以这样的方式建立索引喽

这就是搜索引擎的原理！倒排索引

那样文件量是不是会很大呢？

索引会不会很多？如果文字量大（一篇1000字的文章），而且索引的维护量会不会很大啊

没问题，我们想办法，首先

正向压缩，例如前 ---静夜思

　　　　　　　　前--望庐山瀑布

　　　　　　　　.....

这样，就不用存每首诗的全文了。

还能不能更好呢？

如果是把静夜思转化成key，是不是更简单。

如果是把所有的诗，搭建一个矩阵是不是更简单！

第二步：

建立索引前要先分词，然后再见索引（那要建立多少词啊）

没关系，一篇文章里不用所有的词都建立索引吧，想的是嗯等等这样的词，不用建立索引了吧。

那么引入停用词词库，可以把这些无关紧要的屏蔽掉了。

最后再说 ES的原理，

先有一个叫 lucene 的库，后来又有人基于lucene进行封装，写出了elasticsearch

es将对搜索引擎的操作全部封装成为基于restful 的 api，通过 http请求，对其进行操作。

数据量大量呢，还可以通过分布式，搭建多台服务器

怎么把数据存进去呢？

比如一首诗，有诗题、作者、朝代、字数、诗内容等字段，那么首先，我们可以建立一个名叫poems的索引，然后创建一个名叫poem的类型，类型是通过mapping来定义每个字段的类型，比如诗题、作者、朝代都是keyword类型，诗内容是text类型，而字数是integer类型，最后就是把数据组织成json格式存放进去了。

keyword 和text都是字符串类型的，区别就是 keyword 不会被分词，text要被分词。

keyword类型是不会分词的，直接根据字符串内容建立反向索引，text类型在存入elasticsearch的时候，会先分词，然后根据分词后的内容建立反向索引。

elasticsearch分布式原理

es会对数据进行切片，每一个分片会保存多个副本，为了保证分布式环境下的高可用

转载于:https://www.cnblogs.com/duoba/p/11407818.html

elasticsearch原理学习笔记相关推荐

【ElasticSearch】学习笔记（三）es的高级操作
[ElasticSearch]学习笔记(三)es的高级操作文章目录 [ElasticSearch]学习笔记(三)es的高级操作 1. 数据聚合 1.1 聚合总类 1.2 DSL实现聚合 1.2.1 ...
MOOC人工智能原理学习笔记1
人工智能原理学习笔记1 The Foundations of AI: Philosophy Mathematics Economics Neuroscience Psychology Computer ...
自控原理学习笔记-反馈控制系统的动态模型（4）-频率特性函数Nyquist图及Bode图
自控原理学习笔记自控原理学习笔记专栏文章目录 1.频率特性函数 1.1 图形表示方法: 1.2 零极点位置和暂态增益图 1.2.1 复轨迹曲线 1.2.3 例子 1.3 计算系统响应 2.开环频率 ...
自控原理学习笔记-系统稳定性分析（2）-环路分析及Nyquist-Bode判据
自控原理学习笔记自控原理学习笔记专栏文章目录 3. 环路分析 3.1环路分析基本思想: 3.2 稳定程度的性能指标(相对稳定) 3.3 环路整形 4.Nyquist判据 4.1 与幅角原理关系 4 ...
Golang底层原理学习笔记（一）
LCY~~Golang底层原理学习笔记 1 源码调试 go源代码地址:GitHub - golang/go: The Go programming language 1.1 源码编译现在的go语言大 ...
[编译原理学习笔记2-2] 程序语言的语法描述
[编译原理学习笔记2-2] 程序语言的语法描述文章目录 [编译原理学习笔记2-2] 程序语言的语法描述 [2.3.1] 上下文无关文法 [2.3.2] 语法分析树与二义性 [2.3.3] 形式语言鸟 ...
自控原理学习笔记-反馈控制系统的动态模型（1）
自控原理学习笔记 1.导论 2.反馈控制系统的动态模型(1) 3.反馈控制系统的动态模型(2) 3.反馈控制系统的动态模型(3) 4.反馈控制系统的动态模型(4) 5.反馈控制系统的动态模型(5) 文 ...
Spring5底层原理学习笔记（二）AOP篇
文章目录 AOP实现之ajc编译器 AOP实现之agent类加载 AOP实现之动态代理 jdk动态代理演示模拟实现动态代理动态生成代理类需要使用到asm的api,这里就不展开了 Jdk对于反射调 ...
编译原理学习笔记20——符号表
编译原理学习笔记20--符号表 20.1 符号表的组织与操作 20.2 符号表的内容 20.3 利用符号表分析名字的作用域 20.1 符号表的组织与操作符号表符号表的作用与组织符号表的整理和查找 ...

elasticsearch原理学习笔记

elasticsearch原理学习笔记相关推荐

最新文章

热门文章