宜春做网站的联系电话,比亚迪新型实体企业,商城系统有哪些,免费游戏直接进入1.分布式搜索引擎#xff1a;luceneVS Solr VS Elasticsearch
什么是分布式搜索引擎 搜索引擎#xff1a;数据源#xff1a;数据库或者爬虫资源 分布式存储与搜索#xff1a;多个节点组成的服务#xff0c;提高扩展性(扩展成集群) 使用搜索引擎为搜索提供服务。可以从海量…1.分布式搜索引擎luceneVS Solr VS Elasticsearch
什么是分布式搜索引擎 搜索引擎数据源数据库或者爬虫资源 分布式存储与搜索多个节点组成的服务提高扩展性(扩展成集群) 使用搜索引擎为搜索提供服务。可以从海量数据 中快速的获取到用户想要的数据并且反馈给用户可以提升存储量分布式可以部署在多个节点之上分散存储。
luceceVS Solr VS Elasticsearch 倒排序索引共同特点 Lucene类库api本质是jar包只能使用java整合 Solr基于lucece对Lucene的封装Apache开源项目实现集群通过zookeeper 国外互联网大厂在使用。 ES:基于lucene提供restful类型的接口为我们提供服务。任何开发语言
2.Elasticsearch核心术语
ES-类比数据库 索引index–》类比表 文档(document)–行记录 字段fields-列
stu_index索引
{id: 1001,name: jason,age: 19
},//{}内容为文档idnameage都是字段
{id: 1002,name: tom,age: 18
},
{id: 1003,name: rose,age: 22
}文档都是以json格式存在的。 映射mapping类比表结构定义(intchar长度是不是null等) 近实时NRT:near real time一般一秒左右近实时搜索 节点node每一个服务器 Shard repica数据分片和备份
age: 22 }
集群相关 分片shard把索引库拆分为多份分别放在不同的节点上比如有3个节点3个节点的所有数据内容加在一起是一个完整的索引库。分别保存到三个节点上目的为了水平扩展提高吞吐量。
备份replica每个shard的备份。
简称 shard primary shard主分片 replica replica shard备份节点
3.Elasticsearch集群架构原理 多个es节点组成集群(多个shard),平均分配1000/s是吞吐量。当有宕机后使用repica作为备份。分片提高性能。
4.什么是倒排索引
正排索引 相当于文档中的一条条记录 例子汉语值得学习汉语是语言汉语学习视频
倒排索引起源于实际应用中需要根据属性的值来查询记录。这种索引表的每一项都包括一个属性值和包含该属性值得各个记录地址。由于不是根据记录来确定属性而是根据属性来确定记录的位置。 可以记录文档的ids词频跟位置 例子汉语值得学习汉语是语言汉语学习视频
单词文档ids词频TF;位置POS汉1,2,31:11,2:11,3:11语1,2,31:12,2:22,4,3:12值得11:1:3学习1,31:14,3:1:3是21:1;3言22:1:5视频33:1:4
5.安装Elasticsearch
上传后解压 移动后的es文件 ES 目录介绍 bin可执行文件在里面运行es的命令就在这个里面包含了一些脚本文件等 config配置文件目录 JDKjava环境 lib依赖的jar类库 logs日志文件 moduleses相关的模块 plugins可以自己开发的插件 data这个目录没有自己新建一下后面要用 - mkdir data这个作为索引目录
修改核心配置文件 elasticearch.yml 修改集群名称默认是elasticsearch虽然目前是单机但是也会有默认的 为当前的es节点取个名称名称随意如果在集群环境中都要有相应的名字 修改data数据保存地址 修改日志数据保存地址 绑定es网络ip原理同redis 默认端口号可以自定义修改 集群节点 修改JVM参数 默认xms和xmx都是1g虚拟机内存没这么大修改一下即可 添加用户 ES不允许使用root操作es需要添加用户操作如下
useradd esuser
chown -R esuser:esuser /usr/local/elasticsearch-7.4.2
su esuser
whoami
whoami启动ES ./elasticsearch 如果出现如下错误
那么需要切换到root用户下去修改配置如下
vim /etc/security/limits.conf
* soft nofile 65536
* hard nofile 131072
* soft nproc 2048
* hard nproc 4096别忘记 sysctl -p 刷新一下 最后再次启动OK
测试 访问你的虚拟机ip端口号9200如下则表示OK
停止es 如果是前台启动直接ctrlc就可以停止 后台启动
./elasticsearch -d
停止杀进程 端口号意义 9200Http协议用于外部通讯 9300Tcp协议ES集群之间是通过9300通讯
6.安装es-header插件
由于无法访问GitHub官网以及google应用商店在网上找到教程通过GitClone去访问GitHub。然后在csdn找到别人别人提供的es-head的google商店扩展程序的安装包完成es-head的一种安装方式。 扩展程序的安装地址 GiuClone地址https://www.gitclone.com/
安装node.js:最好结合下面两个教程 https://blog.csdn.net/qq_39038178/article/details/125403896 https://zhuanlan.zhihu.com/p/542932711
需要在测试的后台开启跨域权限。 npm run start
总结独立部署或者通过google扩展程序都很不错主要有两种实现方式 独立部署 使用google extension
