ELK企业级日志分析平台——elasticsearch

集群部署

文档:https://www.elastic.co/guide/en/elasticsearch/reference/7.6/index.html

下载:https://elasticsearch.cn/download/

主机

ip

角色

k8s1

192.168.92.11

cerebro

elk1

192.168.92.31

elasticsearch

elk2

192.168.92.32

elasticsearch

elk3

192.168.92.33

elasticsearch

elk4

192.168.92.34

logstash

elk5

192.168.92.35

kibana

配置解析

[root@elk1 ~]# cat /etc/hosts

软件安装

[root@elk1 ~]# rpm -ivh elasticsearch-7.6.1-x86_64.rpm

修改配置

[root@elk1 ~]# cd /etc/elasticsearch/[root@elk1 elasticsearch]# vim elasticsearch.yml
cluster.name: my-esnetwork.host: 0.0.0.0http.port: 9200discovery.seed_hosts: ["elk1", "elk2", "elk3"]cluster.initial_master_nodes: ["elk1", "elk2", "elk3"]

系统设置

[root@elk1 ~]# vim /etc/security/limits.confelasticsearch soft memlock unlimited
elasticsearch hard memlock unlimited
elasticsearch  -  nofile  65535
elasticsearch  -  nproc  4096[root@elk1 ~]# vim /usr/lib/systemd/system/elasticsearch.service[service]
...
LimitMEMLOCK=infinity[root@elk1 ~]# systemctl  daemon-reload
[root@elk1 ~]# swapoff -a[root@elk1 ~]# vim /etc/fstab

[root@elk1 ~]# systemctl daemon-reload[root@elk1 ~]# systemctl  enable --now  elasticsearch

elk1配置好后,直接把配置复制到elk2和elk3

配置ssh免密

[root@elk1 ~]# ssh-keygen[root@elk1 ~]# ssh-copy-id server2[root@elk1 ~]# ssh-copy-id server3

复制软件

[root@elk1 ~]# scp elasticsearch-7.6.1-x86_64.rpm server2:[root@elk1 ~]# scp elasticsearch-7.6.1-x86_64.rpm server3:

elk2和elk3软件安装

[root@elk2 ~]# rpm -ivh elasticsearch-7.6.1-x86_64.rpm[root@elk3 ~]# rpm -ivh elasticsearch-7.6.1-x86_64.rpm

从elk1复制配置

[root@elk1 ~]# cd /etc/elasticsearch/[root@elk1 elasticsearch]# scp elasticsearch.yml elk2:/etc/elasticsearch/[root@elk1 elasticsearch]# scp elasticsearch.yml elk3:/etc/elasticsearch/[root@elk1 elasticsearch]# scp /etc/security/limits.conf elk2:/etc/security/[root@elk1 elasticsearch]# scp /etc/security/limits.conf elk3:/etc/security/[root@elk1 elasticsearch]# scp /usr/lib/systemd/system/elasticsearch.service elk2:/usr/lib/systemd/system/[root@elk1 elasticsearch]# scp /usr/lib/systemd/system/elasticsearch.service elk3:/usr/lib/systemd/system/

server2上启动服务

[root@elk2 ~]# swapoff -a[root@elk2 ~]# vim /etc/fstab

[root@elk2 ~]# systemctl daemon-reload[root@elk2 ~]# systemctl  enable --now  elasticsearch

server3上启动服务

[root@elk3 ~]# swapoff -a[root@elk3 ~]# vim /etc/fstab

[root@elk3 ~]# systemctl daemon-reload[root@elk3 ~]# systemctl  enable --now  elasticsearch

cerebro部署

cerebro官方:https://github.com/lmenezes/cerebro/

使用docker启动服务

[root@k8s1 ~]#  docker pull lmenezes/cerebro[root@k8s1 ~]#  docker run -d --name cerebro -p 9000:9000 lmenezes/cerebro

访问网页:192.168.92.11:9000

节点地址可以填写任意ES集群节点ip

elasticsearch集群角色分类

[root@elk1 ~]# vim /etc/elasticsearch/elasticsearch.ymlnode.master: true
node.data: false
node.ingest: true
node.ml: false[root@elk1 ~]# systemctl  restart elasticsearch.service

[root@elk2 ~]# vim /etc/elasticsearch/elasticsearch.ymlnode.master: true
node.data: true
node.ingest: false
node.ml: false[root@elk2 ~]# systemctl  restart elasticsearch.service

[root@elk3 ~]# vim /etc/elasticsearch/elasticsearch.ymlnode.master: true
node.data: true
node.ingest: false
node.ml: false[root@elk3 ~]# systemctl  restart elasticsearch.service

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/166311.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

数据库实验五 数据库设计

数据库实验五 数据库设计 一、实验目的二、实验内容三、实验内容四、验证性实验五、设计性实验 一、实验目的 1.了解E-R图构成要素以及各要素图元。 2.掌握概念模型E-R图的绘制方法。 3.掌握概念模型向逻辑模型的转换原则和步骤。 4.运用sql编程实现 二、实验内容 1.选取一个…

医院手术麻醉信息系统全套源码,自主版权,支持二次开发

医院手术麻醉信息系统全套商业源码,自主版权,支持二次开发 手术麻醉信息系统是HIS产品的中的一个组成部分,主要应用于医院的麻醉科,属于电子病历类产品。医院麻醉监护的功能覆盖整个手术与麻醉的全过程,包括手术申请与…

人工智能中的文本分类:技术突破与实战指导

在本文中,我们全面探讨了文本分类技术的发展历程、基本原理、关键技术、深度学习的应用,以及从RNN到Transformer的技术演进。文章详细介绍了各种模型的原理和实战应用,旨在提供对文本分类技术深入理解的全面视角。 关注TechLead,分…

回归预测 | MATLAB实现SCN随机配置网络多输入单输出回归预测

回归预测 | MATLAB实现SCN随机配置网络多输入单输出回归预测 目录 回归预测 | MATLAB实现SCN随机配置网络多输入单输出回归预测效果一览基本介绍程序设计参考资料 效果一览 基本介绍 Matlab实现SCN随机配置网络多变量回归预测 1.data为数据集,7个输入特征&#xff0…

基于Python实现汽车销售数据可视化+预测【500010086.1】

导入模块 import numpy as np import pandas as pd from pylab import mpl import plotly.express as px import matplotlib.pyplot as plt import seaborn as sns设置全局字体 plt.rcParams[font.sans-serif][kaiti]获取数据 total_sales_df pd.read_excel(r"./data/中…

机器学习第13天:模型性能评估指标

☁️主页 Nowl 🔥专栏《机器学习实战》 《机器学习》 📑君子坐而论道,少年起而行之 文章目录 交叉验证 保留交叉验证 k-折交叉验证 留一交叉验证 混淆矩阵 精度与召回率 介绍 精度 召回率 区别 使用代码 偏差与方差 介绍 区…

zerotier 搭建 moon中转服务器 及 自建planet

搭建moon 服务器 环境准备 # 安装依赖 yum install wget gcc gcc-c git -y yum install json-devel -y# 下载及安装 curl -s https://install.zerotier.com/ | sudo bash节点ID 配置 配置moon.json文件 cd /var/lib/zerotier-one/# 导出依赖 zerotier-idtool initmoon ide…

SpringBoot项目连接,有Kerberos认证的Kafka

在连接Kerberos认证kafka之前,需要了解Kerberos协议 二、什么是Kerberos协议 Kerberos是一种计算机网络认证协议 ,其设计目标是通过密钥系统为网络中通信的客户机(Client)/服务器(Server)应用程序提供严格的身份验证服务,确保通信双方身份的真…

历时三个月,我发布了一款外卖返钱小程序

近几年,推广外卖红包爆火,各种推广外卖红包的公众号层出不穷。于是,我就在想外卖红包究竟是怎么一回事。就这样,我带着问题开始了关于外卖红包的研究。 在研究的过程中,我开始了解商品联盟、推广分成、cps等一系列相关…

Springboot3+vue3从0到1开发实战项目(一)

一. 可以在本项目里面自由发挥拓展 二. 知识整合项目使用到的技术 后端开发 : Validation, Mybatis,Redis, Junit,SpringBoot3 ,mysql,Swagger, JDK17 ,项目部署 前端开发: Vue3,Vite,Router…

DNS的各种进阶新玩法

你们好,我的网工朋友,今天和你聊聊DNS。 01 什么是DNS? mac地址诞生,可是太不容易记忆了,出现了简化了IP形式,它被直接暴露给外网不说,还让人类还是觉得比较麻烦,干脆用几个字母算了…

【Git】一文教你学会 submodule 的增、删、改、查

添加子模块 $ git submodule add <url> <path>url 为想要添加的子模块路径path 为子模块存放的本地路径 示例&#xff0c;添加 r-tinymaix 为子模块到主仓库 ./sdk/packages/online-packages/r-tinymaix 路径下&#xff0c;命令如下所示&#xff1a; $ git subm…

用自己热爱的事赚钱,是多么的幸福

挖掘天赋可能有些困难&#xff0c;但挖掘爱好就简单多啦&#xff01;最幸福的事情就是能用自己喜欢的事情赚钱。 我们要说的是一个博主&#xff0c;他非常喜欢骑自行车&#xff0c;虽然他的工作是在外贸公司做销售&#xff0c;但每当有空时&#xff0c;他都会骑自行车。而且他…

Go iota简介

当声明枚举类型或定义一组相关常量时&#xff0c;Go语言中的iota关键字可以帮助我们简化代码并自动生成递增的值。本文档将详细介绍iota的用法和行为。 iota关键字 iota是Go语言中的一个预定义标识符&#xff0c;它用于创建自增的无类型整数常量。iota的行为类似于一个计数器…

3款免费次数多且功能又强大的国产AI绘画工具

hi&#xff0c;同学们&#xff0c;本期是我们第55 期 AI工具教程 最近两个月&#xff0c;国内很多AI绘画软件被关停&#xff0c;国外绝大部分AI绘画工具费用不低&#xff0c;因此 这两天我 重新整理 国产 AI绘画 工具 &#xff0c; 最终 筛选了 3款功能强大&#xf…

LeeCode前端算法基础100题(3)- N皇后

一、问题详情&#xff1a; 按照国际象棋的规则&#xff0c;皇后可以攻击与之处在同一行或同一列或同一斜线上的棋子。 n 皇后问题 研究的是如何将 n 个皇后放置在 nn 的棋盘上&#xff0c;并且使皇后彼此之间不能相互攻击。 给你一个整数 n &#xff0c;返回所有不同的 n 皇后…

虚拟机系列:vmware和Oracle VM VirtualBox虚拟机的区别,简述哪一个更适合我?以及相互转换

一. VMware和Oracle VM VirtualBox虚拟机的区别主要体现在以下几个方面: 首先两种软件的安装使用教程如下: VMware ESXI 安装使用教程 Oracle VM VirtualBox安装使用教程 商业模式:VMware是一家商业公司,而Oracle VM VirtualBox是开源软件; 功能:VMware拥有更多的功能和…

Leetcode200. 岛屿数量

Every day a Leetcode 题目来源&#xff1a;200. 岛屿数量 解法1&#xff1a;深度优先搜索 设目前指针指向一个岛屿中的某一点 (i, j)&#xff0c;寻找包括此点的岛屿边界。 从 (i, j) 向此点的上下左右 (i1,j)&#xff0c;(i-1,j)&#xff0c;(i,j1)&#xff0c;(i,j-1) …

“圆柱-计算公式“技术支持网址

该软件可以计算圆柱的底面圆周长、底面积、侧面积和体积。 您在使用中有遇到任何问题都可以和我们联系。我们会在第一时间回复您。 邮箱地址&#xff1a;elmo30zeongmail.com 谢谢&#xff01;

如何将本地websocket发布至公网并实现远程访问?

本地websocket服务端暴露至公网访问【cpolar内网穿透】 文章目录 本地websocket服务端暴露至公网访问【cpolar内网穿透】1. Java 服务端demo环境2. 在pom文件引入第三包封装的netty框架maven坐标3. 创建服务端,以接口模式调用,方便外部调用4. 启动服务,出现以下信息表示启动成功…