文章目录
- 概述
- 全文搜索引擎
- 概述ES(7.x)
- 安装ES(Docker)
- 测试,是否启动成功
- 可视化工具
- 配置中文
- 客户端
- Postman下载
概述
ES是开源的高扩展的分布式全文搜索引擎,实时的存储、检索数据;本身扩展性很好,可以扩展到上百台服务器,处理 PB 级别的数据。
全文搜索引擎
Google,百度类的网站搜索,它们都是根据网页中的关键字生成索引,我们在搜索的时候输入关键字,它们会将该关键字即索引匹配到的所有网页返回;还有常见的项目中应用日志的搜索等等。对于这些非结构化的数据文本,关系型数据库搜索不是能很好的支持。
一般传统数据库,全文检索都实现的很鸡肋,因为一般也没人用数据库存文本字段。进行全文检索需要扫描整个表,如果数据量大的话即使对 SQL 的语法优化,也收效甚微。建立了索引,但是维护起来也很麻烦,对于 insert 和 update 操作都会重新构建索引。
基于以上原因可以分析得出,在一些生产环境中,使用常规的搜索方式,性能是非常差的:
- 搜索的数据对象是大量的非结构化的文本数据。
- 文件记录量达到数十万或数百万个甚至更多。
- 支持大量基于交互式文本的查询。
- 需求非常灵活的全文搜索查询。
- 对高度相关的搜索结果的有特殊需求,但是没有可用的关系数据库可以满足。
- 对不同记录类型、非文本数据操作或安全事务处理的需求相对较少的情况。
为了解决结构化数据搜索和非结构化数据搜索性能问题,我们就需要专业,健壮,强大的全文搜索引擎
这里说到的全文搜索引擎指的是目前广泛应用的主流搜索引擎。它的工作原理是计算机索引程序通过扫描文章中的每一个词,对每一个词建立一个索引,指明该词在文章中出现的次数和位置,当用户查询时,检索程序就根据事先建立的索引进行查找,并将查找的结果反馈给用户的检索方式。这个过程类似于通过字典中的检索字表查字的过程。
概述ES(7.x)
Elasticsearch 是面向文档型数据库,一条数据在这里就是一个文档。为了方便大家理解,我们将 Elasticsearch 里存储文档数据和关系型数据库 MySQL 存储数据的概念进行一个类比
ES 里的 Index 可以看做一个库,而 Types 相当于表,Documents 则相当于表的行。这里 Types 的概念已经被逐渐弱化,Elasticsearch 6.X 中,一个 index 下已经只能包含一个type,Elasticsearch 7.X 中, Type 的概念已经被删除了。
安装ES(Docker)
# 创建网络
docker network create elastic# 拉取镜像
docker pull elasticsearch:8.14.1# 运行实例:--net上面创建的网络,
docker run -d --name elasticsearch --net elastic -p 9200:9200 -p 9300:9300 -e "discovery.type=single-node" docker.elastic.co/elasticsearch/elasticsearch:8.14.1
测试,是否启动成功
注意! es8.0以上默认开启了 ssl 认证
直接访问 : http://127.0.0.1:9200
是无法访问的,需要访问 https,或者关闭 SSL认证
自Elasticsearch 7.8.0版本开始,Elasticsearch 不再提供默认的用户名和密码。相反,它采用了内置安全特性,并引入了超级用户(superuser)角色和内置用户(built-in users)概念来管理访问控制。
在新安装的情况下,您需要设置一个初始的内置用户以及相关的登录凭据。可以通过修改 Elasticsearch 的配置文件(elasticsearch.yml)来完成此操作。以下是一个示例:
Docker ElastIcSearch容器配置文件路径
进入容器
docker exec -it elasticsearch bash
找到配置文件路径
cd /usr/share/elasticsearch/config
打开 elasticsearch.yml
文件 找到 xpack.security.enabled: true
改为 xpack.security.enabled: false
,这样就可以直接 使用http访问,并且不需要账号密码鉴权,这个设置看个人情况,如果是生产环境建议开始开启 https和账号密码鉴权
重启容器
docker restart some-elasticsearch
访问 http://127.0.0.1:9200
可视化工具
https://www.elastic.co/cn/downloads/kibana
解压使用启动脚本
# Windows
/bin/kibana.bat
# Linux
/bin/kibana
浏览器运行
http://localhost:5601
遇到这个
按照提示路径bin\kibana-verification-code.bat
运行获得code
配置中文
进入容器
docker exec -it kibana /bin/bash
找到配置文件路径
# Linux
cd /usr/share/kibana/config
# Win
./bin/config
打开 kibana.yml
文件 增加 csp.strict: false
设置 CSP 启用 Kibana 模式,如果为 true那么会对浏览器进行安全检查,官方CSP配置说明
增加i18n.locale: "zh-CN"
配置中文
将elasticsearch.hosts: [ "http://elasticsearch:9200" ]
改为 具体 Elasticsearch 通信地址
重启kibana后
客户端
Postman下载
https://www.getpostman.com/