業(yè)務(wù)流程架構(gòu)圖:
創(chuàng)新互聯(lián)公司是一家集網(wǎng)站建設(shè),湘橋企業(yè)網(wǎng)站建設(shè),湘橋品牌網(wǎng)站建設(shè),網(wǎng)站定制,湘橋網(wǎng)站建設(shè)報(bào)價(jià),網(wǎng)絡(luò)營(yíng)銷(xiāo),網(wǎng)絡(luò)優(yōu)化,湘橋網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強(qiáng)企業(yè)競(jìng)爭(zhēng)力??沙浞譂M(mǎn)足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時(shí)我們時(shí)刻保持專(zhuān)業(yè)、時(shí)尚、前沿,時(shí)刻以成就客戶(hù)成長(zhǎng)自我,堅(jiān)持不斷學(xué)習(xí)、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實(shí)用型網(wǎng)站。一個(gè)基于logstash,redis,elasticSearch,kibana的一套數(shù)據(jù)收集分析的系統(tǒng)
架構(gòu)圖描述:
日志收集系統(tǒng):(數(shù)據(jù)來(lái)源)生產(chǎn)者產(chǎn)生的日志記錄行為,通過(guò)被logstash收集、轉(zhuǎn)發(fā),然后傳送給redis做序列話(huà),最后通過(guò)ELK處理分析展示。
elasticSearch會(huì)對(duì)數(shù)據(jù)做存儲(chǔ),索引(基于Lunce),再kibana中建立對(duì)elasticSearch的鏈接,實(shí)時(shí)的抓取索索引后的數(shù)據(jù),這樣數(shù)據(jù)就可以實(shí)時(shí)的進(jìn)行展示,通過(guò)一些數(shù)據(jù)組裝,查詢(xún)條件,得到我們想要的結(jié)果(可以通過(guò)各種方式例如圖表,表格,折線(xiàn)圖等顯示)
效果圖:
####
一、ELK搭建
http://dbspace.blog.51cto.com/6873717/1879106
二、Redis部署
注意redis必須是3.0版本以上,不然會(huì)有各種問(wèn)題,之前遇到坑
三、根據(jù)架構(gòu)編寫(xiě)logstash的日志收集配置
[root@mycat conf]# cat /usr/local/logstash/conf/logstash_client.conf
input{
file{
type => "log_count"
path => "/var/log/messages"
}
}
output{
redis{
host => "192.168.1.114"
port => 6379
data_type => "list"
key => "key_count"
db => 0
}
}
四、編寫(xiě)logstash的配置從redis讀取數(shù)據(jù)轉(zhuǎn)發(fā)到ELK
[root@mycat conf]# cat /usr/local/logstash/conf/logstash_server.conf
input{
redis{
host => "192.168.1.114"
port => 6379
type => "redis-input"
data_type => "list"
key => "key_count"
db => 0
}
}
output{
elasticsearch{
hosts =>"192.168.1.114:9200"
codec =>"json"
}
}
###紅色部分要相同
啟動(dòng)2個(gè)服務(wù)
/usr/local/logstash/bin/logstash -f /usr/local/logstash/conf/logstash_server.conf &
/usr/local/logstash/bin/logstash -f /usr/local/logstash/conf/logstash_client.conf &
五、餅圖分析
另外有需要云服務(wù)器可以了解下創(chuàng)新互聯(lián)cdcxhl.cn,海內(nèi)外云服務(wù)器15元起步,三天無(wú)理由+7*72小時(shí)售后在線(xiàn),公司持有idc許可證,提供“云服務(wù)器、裸金屬服務(wù)器、高防服務(wù)器、香港服務(wù)器、美國(guó)服務(wù)器、虛擬主機(jī)、免備案服務(wù)器”等云主機(jī)租用服務(wù)以及企業(yè)上云的綜合解決方案,具有“安全穩(wěn)定、簡(jiǎn)單易用、服務(wù)可用性高、性?xún)r(jià)比高”等特點(diǎn)與優(yōu)勢(shì),專(zhuān)為企業(yè)上云打造定制,能夠滿(mǎn)足用戶(hù)豐富、多元化的應(yīng)用場(chǎng)景需求。