1. 程式人生 > >redis安裝和可視化grafana部署

redis安裝和可視化grafana部署

redis 可視化 x-pack grafana

使用redis 的原因是當多個clinet同時寫入到logstash或者elasticsearch 時候,有io瓶頸,所以選擇了redis ,當然可以使用kafka,rabbitmq等消息中間件

redis3.2.3

安裝依賴
yum install -y gcc gcc-c++ pcre zlib pcre-devel tcl
解壓改名 cd 到目錄
編譯安裝測試
make && cd src &&make test
make install
創建配置
mkdir /etc/redis
cp /usr/local/redis/redis.conf /etc/redis/6379.conf
vim /etc/redis/6379.conf

監聽地址
bind 192.168.1.115
端口(有需要自行改動)
port 6379
去掉前邊#註釋,修改foobared為你想配置的任意密碼
requirepass foobared
日誌地址
logfile "/var/log/redis.log"
啟動腳本
vim /etc/init.d/redis

#chkconfig: 2345 90 10
#description: service of redis for start and stop add by tomener
PATH=/usr/local/bin:/sbin:/usr/bin:/bin
REDISPORT=6379
EXEC=/usr/local/redis/src/redis-server

REDIS_CLI=/usr/local/redis/src/redis-cli

PIDFILE=/var/run/redis_${REDISPORT}.pid
CONF="/etc/redis/${REDISPORT}.conf"

case "$1" in
start)
if [ -f $PIDFILE ]
then
echo "$PIDFILE exists, process is already running or crashed."
else
echo "Starting Redis server..."
$EXEC $CONF
fi
if [ "$?"="0" ]

then
echo "Redis is running..."
fi
;;
stop)
if [ ! -f $PIDFILE ]
then
echo "$PIDFILE exists, process is not running."
else
PID=$(cat $PIDFILE)
echo "Stopping..."
$REDIS_CLI -h $BIND_IP -a $AUTH -p $REDISPORT SHUTDOWN
sleep 2
while [ -x $PIDFILE ]
do
echo "Waiting for Redis to shutdown..."
sleep 1
done
echo "Redis stopped"
fi
;;
restart|force-reload)
${0} stop
${0} start
;;
*)
echo "Usage: /etc/init.d/redis {start|stop|restart|force-reload}" >&2
exit 1
esac

啟動
chmod +x /etc/init.d/redis
/etc/init.d/redis start

logstash output輸出到redis然後再用logstash-server處理數據輸出到redis集群(理想中還可以加入kafka,rabbitmq等消息中間件這些太龐大了暫時不做)

到logstash-server目錄下
vim config/server-logst.conf
在input後面加入

redis {
host => localhost # redis主機地址
port => 6379 # redis端口號
data_type => "channel" # 使用發布/訂閱模式
key => "logstash_list_0" # 發布通道名稱
}
}

logstash輸出到ES參考上上篇

可視化x-pack

安裝x-pack

x-pack是elasticsearch的一個擴展包,將安全,警告,監視,圖形和報告功能捆綁在一個易於安裝的軟件包中,雖然x-pack被設計為一個無縫的工作,但是你可以輕松的啟用或者關閉一些功能。
bin/elasticsearch-plugin install x-pack
bin/kibana-plugin install x-pack
安裝以後ELK傳輸需要驗證用戶密碼
默認一個超級用戶elastic ,其默認的密碼是changeme
登陸測試發現現在es和kibana都需要用戶驗證了
然後
vim /usr/local/elasticsearch/config/elasticsearch.yml
vim /usr/local/kibana/config/kibana.yml
#禁用插件先
xpack.security.enabled: false
測試不需要驗證用戶

配置kibana具體設置
vim /usr/local/kibana/config/kibana.yml
server.basePath: ""
server.maxPayloadBytes: 1048576
elasticsearch.preserveHost: true
kibana.index: ".kibana"
elasticsearch.pingTimeout: 1500
elasticsearch.requestTimeout: 30000
elasticsearch.shardTimeout: 0
elasticsearch.startupTimeout: 5000
pid.file: /var/run/kibana.pid
logging.dest: stdout
logging.silent: false
logging.quiet: false
logging.verbose: false
ops.interval: 5000
i18n.defaultLocale: "en"
elasticsearch.username: "elastic"
elasticsearch.password: "changeme"

以及
vim /usr/local/elasticsearch/config/elasticsearch.yml
vim /usr/local/kibana/config/kibana.yml
#啟用插件
xpack.security.enabled: true
登陸kibana然後monitoring選項可以看到狀態了!不過此服務試用一月!可以官方註冊一年的閹割版(只有監控了其他的都沒了)的使用時間!
技術分享圖片

給出註冊流程

首先點擊到期時間這裏
技術分享圖片
然後選擇最基本的免費使用,旁邊是收費版帶售後的。
技術分享圖片
開始註冊吧
技術分享圖片
註冊完成會發一封郵件給你許可證下載地址
直接登錄同意協議 選擇你的版本然後開始下載
技術分享圖片
然後到kibana裏使用你的新許可證

#一個月到期後基本其他的功能都沒了

以下為擴展(2.x、5.x的ES版本可以嘗試)

下面將ES連接到grafana可視化

grafana-5.1(目前只支持2.x、5.x暫時沒法用了)

wget https://s3-us-west-2.amazonaws.com/grafana-releases/release/grafana-5.1.0-1.x86_64.rpm
yum localinstall grafana-5.1.0-1.x86_64.rpm
rpm -qc grafana
/etc/grafana/grafana.ini
/etc/grafana/ldap.toml
/etc/init.d/grafana-server
/etc/sysconfig/grafana-server
/usr/lib/systemd/system/grafana-server.service

二進制文件 /usr/sbin/grafana-server
服務管理腳本 /etc/init.d/grafana-server
安裝默認文件 /etc/sysconfig/grafana-server
配置文件 /etc/grafana/grafana.ini
安裝systemd服務(如果systemd可用 grafana-server.service
日誌文件 /var/log/grafana/grafana.log
啟動grafana-server服務
systemctl enable grafana-server.service
systemctl start grafana-server.service
訪問測試http://ip:3000/
默認賬號admin 密碼也是admin
登陸後
添加接入源(ES、mysql、zabbix等)

redis安裝和可視化grafana部署