lepus监控oracle数据库_lepus天兔数据库监控系统搭建记录

一、开场白

去年的锅,今年才接。时间都耗在了各种业务测试上,上周刚刚把锅甩了,赶紧把以前没完成的事做完。

二、lepus简介

简洁、直观、强大的开源数据库监控系统,MySQL/Oracle/MongoDB/Redis一站式性能监控,让数据库监控更简单。没有memcached。

官网:http://www.lepus.cc/

QQ群:149648217

搭建完成后是这样的

三、lepus3.7搭建

3.8版本已经发布,这里用的是3.7,文末照旧给出所有相关软件下载地址。操作系统CentOS6.4 64位,自带python2.6.6。

依赖软件

1.MySQL 5.0及以上(必须,用来存储监控系统采集的数据)

2.Apache 2.2及以上 (必须,WEB服务器运行服务器)

3.PHP 5.3以上 (必须,提供WEB界面支持)

4.Python2 (必须,推荐2.6及以上版本,执行数据采集和报警任务,不支持Python3)

5.Python连接和监控数据库的相关驱动模块包:

MySQLdb for python (Python连接MySQl的接口,用于监控MySQL,此模块必须安装)

cx_oracle for python (Python连接Oracle的接口,非必须,如果需要监控oracle此模块必须安装)

Pymongo for python (Python连接MongoDB的接口,非必须,如果需要监控MongoDB此模块必须安装 )

redis-py for python (Python连接Redis的接口,非必须,如果需要监控Redis此模块必须安装)

安装步骤

1.xampp安装

上传安装文件并添加+x执行权限,执行安装

./xampp-linux-x64-5.5.24-0-installer.run

2.安装各数据库python驱动

安装前准备:

yum -y install rpm-build gcc-c++ mysql-devel python-devel

各驱动名称:

Mysql:MySQLdb

Redis:redis

Mongodb:pymongo

安装以上三个:

pip install pymongo redis mysql-python

需要先配置oracle客户端:

下载地址:

http://www.oracle.com/technetwork/topics/linuxx86-64soft-092277.html

下载

instantclient-basic-linux.x64-12.2.0.1.0.zip

instantclient-sdk-linux.x64-12.2.0.1.0.zip

分别解压后:

yum install unzip -y

unzip ***********

cp -R instantclient_12_2 /opt/

配置环境变量:

vi /etc/profile

#在文件末添加:

export ORACLE_HOME=/opt/instantclient_12_2/

export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$ORACLE_HOME

确保文件生效

source /etc/profile

创建软链接

cd /opt/instantclient_12_2/

ln -s libclntsh.so.12.1 libclntsh.so

使用pip安装

pip install cx_Oracle

3.创建并配置lepus数据库

解压安装包:

unzip lepus_v3.7.zip

启动lampp

/opt/lampp/lampp start

进入mysql命令行,默认密码为空(直接回车)

/opt/lampp/bin/mysql –uroot –p

创建lepus数据库、账号、修改密码以及访问host

use mysql

create database lepus default character set utf8;

GRANT ALL privileges ON *.* TO 'root'@'localhost' IDENTIFIED BY '123456';

GRANT ALL privileges ON *.* TO 'root'@'%' IDENTIFIED BY '123456';

GRANT ALL privileges ON *.* TO 'lepus'@'localhost' IDENTIFIED BY '123456';

GRANT ALL privileges ON *.* TO 'lepus'@'%' IDENTIFIED BY '123456';

flush privileges;

导入初始化数据:

use lepus

source xxx/xxx/lepus_table.sql

source xxx/xxx/lepus_data.sql

4.安装lepus程序

切换到安装包python目录下执行安装:

cd lepus_v3.7/python

./install.sh

修改配置文件

vi /usr/local/lepus/etc/config.ini

[monitor_server]

host="127.0.0.1" #这个必须是127.0.0.1

port=3306

user="lepus"#数据库用户名,我上面设置的是lepus

passwd="123456"#数据库密码,我上面设置的密码是123456

dbname="lepus"

lepus常用命令:

lepus start/stop/status

查看启动日志:

tail -f /usr/local/lepus/nohup.out

5.安装lepus web

创建文件夹

mkdir /opt/lampp/htdocs/lepus

拷贝安装文件

cp -rf lepus_v3.7/php/* /opt/lampp/htdocs/lepus

编辑配置文件

vi /opt/lampp/htdocs/lepus/application/config/database.php

$db['default']['hostname'] = '192.168.200.136';

$db['default']['port'] = '3306';

$db['default']['username'] = 'lepus';

$db['default']['password'] = '123456';

$db['default']['database'] = 'lepus';

$db['default']['dbdriver'] = 'mysql';

重启xampp

/opt/lampp/lampp restart

启动lepus

lepus start

访问http://192.168.200.136/lepus (记得关防火墙或者设置防火墙策略)

默认账号密码admin/Lepusadmin

四、监控mysql

1.添加mysql

2.配置慢查询

被监控机主要有以下几个步骤:mysql基础配置--依赖软件安装---脚本配置--定时任务。

mysql基础配置:

在mysql命令行中执行以下命令:

set global slow_query_log=on;

set global long_query_time=1;#设置记录查询超过多长时间的sql,根据自己情况定

set global slow_query_log_file='/opt/lampp/var/mysql/';#设置mysql慢查询日志路径

断开当前连接然后重新连接进入命令行查询(缓存):

show variables like '%slow%';

show variables like '%long_query_time%';

依赖软件安装:

# yum -y install perl-IO-Socket-SSL

# yum -y install perl-DBI

# yum -y install perl-DBD-MySQL

# yum –y install perl-Time-HiRes

#yum –y install perl-Digest-MD5

或者:

yum install perl* -y

上传percona-toolkit.rpm并安装

rpm -ivh percona-toolkit.rpm

脚本配置:

vi /usr/local/lepus/client/mysql/lepus_slowquery.sh

#config lepus database server lepus服务器

lepus_db_host="192.168.200.136"

lepus_db_port=3306

lepus_db_user="lepus"

lepus_db_password="123456"

lepus_db_database="lepus"

#config mysql server 被监控的mysql

mysql_client="/opt/lampp/bin/mysql"

mysql_host="192.168.200.136"

mysql_port=3306

mysql_user="lepus"

mysql_password="123456"

#config slowqury 慢查询日志

slowquery_dir="/opt/lampp/var/mysql/"

slowquery_long_time=1

slowquery_file=`$mysql_client -h$mysql_host -P$mysql_port -u$mysql_user -p$mysql_password -e "show variables like 'slow_query_log_file'"|grep log|awk '{print $2}'`

pt_query_digest="/usr/bin/pt-query-digest"

#config server_id 与web上配置中心,mysql列表中的ID对应

lepus_server_id=1

手动运行查看是否正常运行:

sh /usr/local/lepus/client/mysql/lepus_slowquery.sh

定时任务:

查看所有定时任务:

crontab -l

添加定时任务:

crontab -e

*/5 * * * * sh /usr/local/sbin/lepus_slowquery.sh > /dev/null 2>&1

3.配置表空间分析

vi /usr/local/lepus/lepus.py

在monitor_mysql中添加(注意python代码格式):

job = Process(target = job_run, args = ('check_mysql_bigtable',int(frequency_monitor)*120)

joblist.append(job)

job.start()

修改脚本(非必须)

vi /usr/local/lepus/check_mysql_bigtable.py

bigtable=curs.execute("SELECT table_schema as 'DB',table_name as 'TABLE',CONCAT(ROUND(( data_length + index_length ) / ( 1024 * 1024 ), 2), '') 'TOTAL' , table_comment as COMMENT FROM information_schema.TABLES group by table_name having total > 5 ORDER BY data_length + index_length DESC LIMIT 10;");

以上修改内容表示提取表大小大于5M并且是排名前10的表。

pip install functions

将脚本放到crontab中执行,定期采集数据

crontab -e

*/5 * * * * python /usr/local/lepus/check_mysql_bigtable.py

4.配置表复制监控

主从mysql实例添加到监控后,等一会时间,监控就会有数据产生。

搜索选项的“角色”框中选择SLAVE角色,搜索后就会出现相应的数据。

五、监控mongodb

确保驱动已安装:

python lepus_v3.7/python/test_connect_mongodb.py

试运行check_mongodb.py :

cd /usr/local/lepus/

python check_mongodb.py

运行成功则能正常使用。

我遇到的问题:

Pymongo安装了太新的版本,重新安装pymongo2.4再次运行(不知道lepus3.8有无更新)

这次真看不懂了,留个锅,以后再看。

六、监控redis

输入ip端口即可。

七、监控OS

安装组件:

yum install net-snmp*

编辑配置

vi /etc/snmp/snmpd.conf

#41行 将default改为监控服务器ip; 将public改成lepus (备注: lepus是您在天兔配置文件里配置的通用实体,如果您配置的实体是其他名称,这里要做相应的修改)示例如下:

com2sec notConfigUser 10.0.10.10 lepus

#62行 将systemview 改为all,供所有snmp访问权限

access notConfigGroup "" any noauth exact all none none

#85行 将#注释符号去掉

view all included .1 80

尝试启动:

/etc/init.d/snmpd start

验证是否启动成功:

ps -ef | grep 'snmpd'

修改日志级别

vi /etc/init.d/snmpd

#OPTIONS="-Lsd -Lf /dev/null -p /var/run/snmpd.pid -a"

OPTIONS="-LS 4 d -p /var/run/snmpd.pid -a"

重启服务

/etc/init.d/snmpd restart

八、监控oracle

确保驱动已安装:

python lepus_v3.7/python/test_driver_oracle.py

添加实例,果失败,查看日志:

ORA-00942: table or view does not exist

查到可能有如下原因:

使用数据库管理员账号再次添加实例重试成功。

安利一波我的图

恩 大概就是这样。

九、其它乱起八糟的记录

python2.6升级python2.7

wget http://python.org/ftp/python/2.7.3/Python-2.7.3.tar.bz2 --no-check-certificate

tar -jxvf Python-2.7.3.tar.bz2

cd Python-2.7.3

mkdir /usr/local/python27

./configure --prefix=/usr/local/python27

make

make install

mv /usr/bin/python /usr/bin/python_old

ln -s /usr/local/python27/bin/python2.7 /usr/bin/python

python -V命令验证

安装pip

wget https://bootstrap.pypa.io/get-pip.py

python get-pip.py

#curl https://bootstrap.pypa.io/get-pip.py | python

yum源更换

升级python为2.7后yum无法正常使用,yum支持的是python2.6版本

vi /usr/bin/yum

将第一行python修改为python2或python2.6

奇葩问题一个:使用yum的时候提示:

GPG key retrieval failed: [Errno 14] PYCURL ERROR 56 - "Failure when receiving data from the peer"

解决办法:

rpm --import http://mirrors.163.com/centos/RPM-GPG-KEY-CentOS-6

mongodb安装

1、下载mongodb安装包,

2、在/usr/local目录下创建一个mongodb文件夹,然后把mongodb的安装包解压到mongodb文件中

3、创建一个存放数据的文件夹data和日志文件logs

cd /usr/local/mongodb

mkdir data

touch mongodb.logs

4、启动和关闭mongodb

/usr/local/mongodb/bin/mongod -dbpath=/usr/local/mongodb/data/ -logpath=/usr/local/mongodb/mongodb.logs -logappend -port=27017 -fork

/usr/local/mongodb/bin/mongod --shutdown --dbpath /usr/local/mongodb/data/

注:参考文章使用的是配置文件启动。

5.创建管理员以及常用的操作

./mongo

use admin;

db.system.users.find();

show collections;

db.createUser({ user: "root",pwd: "123456",customData:{name:"root"},roles:[{ role: "userAdminAnyDatabase",db: "admin" }]})

db.createUser({user: "myUserAdmin",pwd: "abc123",roles: [ { role: "userAdminAnyDatabase", db: "admin" } ]})

db.auth('myUserAdmin','abc123'); //本地授权操作1 代表成功

db.createUser({user:"admin",pwd:"123456",roles:[{role:"root",db:"admin"}]})

db.system.users.remove({user:"myUserAdmin"});

db.dropUser('myUserAdmin')

db.dropUser('useradmin')

db.auth('admin','123456');

db.changeUserPassword("username", "xxx")

以上为创建账户

以下为创建库

./mongo // 进入mongo shell

use test // 使用 test 库,如果没有则新建

db.createCollection('test') // 在 test 库中新建一个叫 user 的 collection

db.test.insert({"name":"yuyuy","nums":100});

db.test.find()

6.远程无法登陆的问题

db.system.version.update({"_id":"authSchema"},{$set:{"currentVersion":3}})

默认所有ip都可以访问

新安装的数据没有admin管理员

MongoDB默认情况下不启用访问控制

redis安装

1、下载redis安装包

wget http://download.redis.io/releases/redis-2.8.12.tar.gz

2、安装redis依赖

yum -y install gcc* make tcl

3、编译安装

tar xvf redis-2.8.12.tar.gz

#改名

mv redis-2.8.12 redis

#移动

mv redis /usr/local

cd /usr/local/redis

make

4、使用redis的可执行命令

将redis命令移动到/usr/local/bin目录下,把redis命令放到/usr/local/bin目录下后就可以直接使用redis命令,如果不放到/usr/local/bin也是可以的,直接到/usr/local/redis/src目录下使用即可。

cd /usr/local/redis/src

cp -rf redis-benchmark redis-server redis-cli redis-check-dump redis-check-aof /usr/local/bin

5.启动和关闭redis

redis-server &

redis-cli shutdown

文件编码

windows编码一般是GBK(dos),而linux文件编码是unix UTF-8

如果编码不正确会导致脚本无法运行

首先使用locale命令查看系统编码,如果不是LANG=en_US.UTF-8就修改/etc/sysconfig/i18n文件直到生效

vi fileName

:set fileencoding 查看文件编码

:set fileencoding=utf-8

:set ff=unix 设置为unix

:set ff? 查看系统编码

十、软件下载

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/244539.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

html鼠标滚轴后下一页,鼠标滚动有一页ppt不能马上下翻,而是上下移动,移动到一定位置后才翻到下一页,这是怎么回事?怎么解决?...

一般是这张幻灯片里有图片才会出现这种问题,你的图片格式有问题,点击图片,再点击格式,把图片格式换一下就好了同问,但不是下面两个原因,都试过没用1,ppt的比例太大,缩小比例即可。Ct…

resnet keras 结构_Day146:第二讲 ResNet

出处论文:Deep Residual Learning for Image Recognition作者:Kaiming He, Xiangyu Zhang, Shaoqing Ren, Jian SunImageNet Top5错误率: 3.57%主要思想主要体现在 Residual(残差),从名字就可以看出,不学绝对值&#x…

influxdb数据过期_Influxdb Cluster下的数据写入

Cluster下的数据写入数据写入的实现主要分析cluster/points_writer.go中的WritePoints函数的实现// WritePoints writes across multiple local and remote data nodes according the consistency level.func (w *PointsWriter) WritePoints(p *WritePointsRequest) error {w.s…

html5内容切换特效,html5+jQuery图片和文字内容同时左右切换特效

html5jQuery图片和文字内容同时左右切换特效,点击图片或者点击左右按钮进行切换,图片转动以及文字内容动画效果切换。查看演示下载资源:22次 下载资源下载积分:20积分js代码 (function(){var bannerIndex 0;var $bannerBgs $(.j…

asp向不同的用户发送信息_【asp.net core 系列】 1 带你了解一下asp.net core

0. 前言 这是一个新的系列,名字是《http://ASP.NET Core 入门到实战》。这个系列主讲http://ASP.NET Core MVC,辅助一些前端的基础知识(能用来实现我们需要的即可,并非主讲)。同时这个系列也会在后续介绍http://ASP.NE…

python邮件转发_把Gmail邮件转发到gtalk的Python方法

用Python方法把Gmail邮件转发到gtalk有多难,想知道gmail如何转发邮件?gmail自动转发已收到邮件的设置方法。本文就来把这段详细的python学习参考代码贴出来,大家一起参考下吧。gmail转发邮件到gtalk的Python方法源码:#!/usr/bin/env python#…

html 怎么使用http请求数据类型,HTTP请求方式中8种请求方法(简单介绍)

HTTP工作原理HTTP协议定义Web客户端如何从Web服务器请求Web页面,以及服务器如何把Web页面传送给客户端。HTTP协议采用了请求/响应模型。客户端向服务器发送一个请求报文,请求报文包含请求的方法、URL、协议版本、请求头部和请求数据。服务器以一个状态行…

上行30m下行200m是多少宽带_套餐内有多少流量,就加送多少流量!电信流量攻势太凶猛!...

虽然6月6日国内发放了5G商用牌照,5G时代正式开启。但是对于用户来说,要想用上5G服务尚需等待一段时间,因为现在5G手机终端尚未普及、5G资费套餐也未出炉、运营商的5G网络还需要通过建设进一步扩大覆盖范围。在5G真正走近用户的前夕&#xff0…

怎么在终端启用python_在终端启动Python时报错的解决方案

最近,在终端启动Python时,报了一个错误: Failed calling sys.__interactivehook__ Traceback (most recent call last): File "d:\ProgramData\Anaconda3\lib\site.py", line 439, in register_readline readline.read_history_fil…

vue项目html引入css,vue项目引入自定义.css的样式文件

ES6的引入方式:.vue文件中css文件引入import "../assets/common/common.css";//自定义.css的样式路径js文件的引入在main.js中:import API from ./assets/api/api.config.jsVue.prototype.$API API;P.S.:传统上,引入cs…

485通信原理_上位机开发之单片机通信实践

经常会有一些学员会问到上位机与单片机之间通信的问题,而我们经常会讲上位机与PLC之间通信,那么其实对上位机开发来说,不管是和PLC通信,还是和单片机通信,通信原理都是一样的。PLC的本质就是单片机,在单片机…

hive 结构metastone_深入理解hive之事务处理

事务的四个特性1.automicity:原子性2.consistency:一致性3. isolation:独立性4.durability:持久性5.支持事务有几个条件需要满足:1.所有的事务都支持自动提交;2.只支持ORC格式的数据;3.桶表7.配置hive的参数使其支持事务&#xff…

计算机数媒专业优势,27所院校新开设数字媒体艺术专业,“数媒”专业为什么这么火?...

原标题:27所院校新开设数字媒体艺术专业,“数媒”专业为什么这么火?今年2月,教育部公布了2020年度普通高等学校本科专业备案和审批结果。其中,有包括华中农业大学在内的全国27所院校新增备案了“数字媒体艺术”本科专业…

sap 分割评估_SAP那些事-实战篇-73-受托加工的几种方案探讨

大家都知道,SAP中对于委托加工有标准的解决方案,包括标准委托(带料委托加工)和工序委托,然而,对于受托方(即代加工方)SAP却没有标准的解决方案,后来想想,也怪…

婚宴座位图html5,图解现代婚宴座位安排

中国人衣、食、住、行素来都有“礼”可循。对于婚宴来说更是讲究,桌子的摆放,座位的安排都需要经过深思熟虑。因为小小的桌椅就关系到婚宴的礼仪以及宾客的身份。下面就让专家为我们进行图解婚宴座位安排和礼仪的指导吧!婚礼座位安排&#xf…

c++ 图的连通分量是什么_学习数据结构第五章:图(图的遍历操作)

第五章:图(图的遍历操作)1.图的遍历图的遍历:从图中某一顶点出发,按照某种搜索方法沿着图中的边对图中的所有顶点访问依次且仅访问一次其实树的层次遍历和图的广度优先搜索类似,可以把这个二叉树看成一个图2.广度优先搜索(BFS)广度…

带通滤波器作用和用途_带通滤波器的作用和电路设计图

一个带通滤波器是一个只有在特定频段的频率传递信号衰减这一频段以外的所有信号的同时,其目的是的电路。在一个带通滤波器的重要参数,高,低截止频率( F H 和f 升),带宽(BW),中心频率 f C,中心频率增益&…

轮换html有虚宽出现,乒乓球理论考试复习资料

一、判断题(共10题,每题3分)1)突出、战术变化多、无明显漏洞。()正确2)运动员甲使用的球拍底板由于磨损碰掉一块木片,他用质量相同的木料进行修补,表面平整,裁判员不许其正式比赛时使用。()正确3)发球时第一落点距球网过近&#x…

gson json转map_Java几种常用JSON库性能比较

点击上方“Java研发军团”,选择“置顶公众号”关键时刻,第一时间送达!阅读本文需要5分钟作者:飞污熊xncoding.com/2018/01/09/java/jsons.html本篇通过JMH来测试一下Java中几种常见的JSON解析库的性能。 每次都在网上看到别人说什…

nodejs 游戏框架_nodejs游戏服务器框架

{"moduleinfo":{"card_count":[{"count_phone":1,"count":1}],"search_count":[{"count_phone":6,"count":6}]},"card":[{"des":"云服务器 ECS(Elastic Compute Service)是一…