ELK企業應用-kibana頁面顯示不正常(一)
ELK企業應用-kibana頁面顯示不正常(一)
kibana頁面顯示不正常-Request Timeout after 30000ms
1:錯誤頁面
2:問題分析
kibana處理時間過長,應該是日誌過大導致kibana呼叫超時
檢查服務埠
埠存活
檢查日誌
[2018-10-18T09:33:41,346][ERROR][logstash.outputs.elasticsearch] Attempted to send a bulk request to elasticsearch' but Elasticsearch appears to be unreachable or down! {:error_message=>"Elasticsearch Unreachable: [http://elk-data:9200/][Manticore::SocketTimeout] Read timed out", :class=>"LogStash::Outputs::ElasticSearch::HttpClient::Pool::HostUnreachableError", :will_retry_in_seconds=>4}
[2018-10-18T09:38:03,046][ERROR][logstash.licensechecker.licensemanager] Unable to retrieve license information from license server {:message=>"Got response code '400' contacting Elasticsearch at URL 'http://elk-master:9200/_xpack'", :class=>"LogStash::Outputs::ElasticSearch::HttpClient::Pool::BadResponseCodeError"}
重啟了叢集所有elasticsearch,雖然埠都在,但可能出現了問題
檢視索引
red索引188個(注:包含了redis*索引,再次不太嚴謹)
正常索引181個
分析:非正常索引導致logstash日誌報錯,所以logstash日誌報錯可忽略。但kibana打不開,應該是非正常索引佔用了大部分資源,導致磁碟佔有率過高。
3:問題建議
刪除30天前的日誌,使伺服器資源釋放
指令碼檢視:https://blog.csdn.net/qq_37960324/article/details/83339951