深度学习核心技术精讲100篇(四十八)-TB级的日志监控系统很难?带你使用ELK轻松搭建日志监控系统
生活随笔
收集整理的這篇文章主要介紹了
深度学习核心技术精讲100篇(四十八)-TB级的日志监控系统很难?带你使用ELK轻松搭建日志监控系统
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個參考.
前言
本文主要介紹怎么使用 ELK Stack 幫助我們打造一個支撐起日產(chǎn) TB 級的日志監(jiān)控系統(tǒng)。在企業(yè)級的微服務(wù)環(huán)境中,跑著成百上千個服務(wù)都算是比較小的規(guī)模了。在生產(chǎn)環(huán)境上,日志扮演著很重要的角色,排查異常需要日志,性能優(yōu)化需要日志,業(yè)務(wù)排查需要業(yè)務(wù)等等。
然而在生產(chǎn)上跑著成百上千個服務(wù),每個服務(wù)都只會簡單的本地化存儲,當(dāng)需要日志協(xié)助排查問題時,很難找到日志所在的節(jié)點。也很難挖掘業(yè)務(wù)日志的數(shù)據(jù)價值。
那么將日志統(tǒng)一輸出到一個地方集中管理,然后將日志處理化,把結(jié)果輸出成運維、研發(fā)可用的數(shù)據(jù)是解決日志管理、協(xié)助運維的可行方案,也是企業(yè)迫切解決日志的需求。
解決方案
通過上面的需求我們推出了日志監(jiān)控系統(tǒng),如上圖:
-
日志統(tǒng)一收集、過濾清洗。
-
生成可視化界面、監(jiān)控,告警,日志搜索。
總結(jié)
以上是生活随笔為你收集整理的深度学习核心技术精讲100篇(四十八)-TB级的日志监控系统很难?带你使用ELK轻松搭建日志监控系统的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 数据中台实战(一):以B2B电商亿订为例
- 下一篇: 以MATLAB的方式实现微积分问题的计算