下文主要給大家?guī)硗ㄟ^使用filebeat收集MySQL慢查詢?nèi)罩驹敿毑襟E,希望這些內(nèi)容能夠帶給大家實際用處,這也是我編輯通過使用filebeat收集mysql慢查詢?nèi)罩驹敿毑襟E這篇文章的主要目的。好了,廢話不多說,大家直接看下文吧。
創(chuàng)新互聯(lián)公司是一家集網(wǎng)站建設,安國企業(yè)網(wǎng)站建設,安國品牌網(wǎng)站建設,網(wǎng)站定制,安國網(wǎng)站建設報價,網(wǎng)絡營銷,網(wǎng)絡優(yōu)化,安國網(wǎng)站推廣為一體的創(chuàng)新建站企業(yè),幫助傳統(tǒng)企業(yè)提升企業(yè)形象加強企業(yè)競爭力??沙浞譂M足這一群體相比中小企業(yè)更為豐富、高端、多元的互聯(lián)網(wǎng)需求。同時我們時刻保持專業(yè)、時尚、前沿,時刻以成就客戶成長自我,堅持不斷學習、思考、沉淀、凈化自己,讓我們?yōu)楦嗟钠髽I(yè)打造出實用型網(wǎng)站。
環(huán)境介紹:
操作系統(tǒng)版本:CentOS Linux release 7.3.1611 (Core) 64bit
Mysql版本: 5.6.28
Logstash版本: logstash 5.3.0
Elasticsearch版本:elasticsearch 5.3.0
Kibana版本:Kibana 5.3.0
Java版本:1.8.0_121
Mysql版本: 5.6.28及mysql慢日志
[bash]# Time: 170420 1:41:04 # User@Host: root[root] @ [192.168.1.178] Id: 2238895756 # Query_time: 3.887598 Lock_time: 0.000099 Rows_sent: 19 Rows_examined: 19 SET timestamp=1492623664; select * from users_test; # User@Host: root[root] @ [192.168.1.178] Id: 2238895828 # Query_time: 3.161184 Lock_time: 0.000150 Rows_sent: 28 Rows_examined: 28 SET timestamp=1492623664; select * from users_test; # Time: 170420 1:41:12[/bash]
filebeat及l(fā)ogstash配置
filebeat.yml配置文件
[bash]filebeat: prospectors: - paths: - /data/mysql/xxx-slow.log document_type: mysqlslow multiline: pattern: "^# User@Host: " negate: true match: after registry_file: /var/lib/filebeat/registry output: logstash: hosts: ["192.168.1.63:5044"][/bash]
logstash.conf
[bash]input { beats { port => 5044 } } filter { grok { match => [ "message", "(?m)^# User@Host: %{USER:query_user}\[[^\]]+\] @ (?:(?\S*) )?\[(?:%{IP:query_ip})?\]\s*Id: %{NUMBER:id:int}\s+# Query_time: %{NUMBER:query_time:float}\s+Lock_time: %{NUMBER:lock_time:float}\s+Rows_sent: %{NUMBER:rows_sent:int}\s+Rows_examined: %{NUMBER:rows_examined:int}\s*(?:use %{DATA:database};\s*)?SET timestamp=%{NUMBER:timestamp};\s*(? (? \w+)\s+.*)" ] } grok { match => { "message" => "# Time: " } add_tag => [ "drop" ] tag_on_failure =>[] } if "drop" in [tags] { drop {} } date { match => [ "timestamp", "UNIX", "YYYY-MM-dd HH:mm:ss"] remove_field => [ "timestamp" ] } } output { elasticsearch { hosts => "192.168.1.63:9200" manage_template => false index => "%{[@metadata][beat]}-%{[type]}-%{+YYYY.MM.dd}" document_type => "%{[@metadata][type]}" } }[/bash]
對于以上關于通過使用filebeat收集mysql慢查詢?nèi)罩驹敿毑襟E,大家是不是覺得非常有幫助。如果需要了解更多內(nèi)容,請繼續(xù)關注我們的行業(yè)資訊,相信你會喜歡上這些內(nèi)容的。