ヽ(?ω??)?有沒這樣一個日志管理系統(tǒng)?

最早接觸的日志管理應(yīng)用是ELK,當(dāng)時忽悠君坐在我對面成天喊要招個ES的大牛,一會林大師又在旁邊寫著各種正則式。還搞不清楚狀況的我就開始改KIBANA,給KIBANA換個皮。無奈KIBANA實在太不好改了,時間也不是特別充裕,好吧,從頭寫一個還快,雖然效果不太好。具體那玩意是做什么的,當(dāng)時也沒細(xì)想,反正能展示出來就好了,就是給個關(guān)鍵字,然后展示下對應(yīng)人日志。

過了沒多久,就跑去聽了一下Splunk的安利會議,聽半天,好像什么都沒收獲到,提問的人問的問題也很技術(shù),沒有落到實用性上。不過現(xiàn)在回過頭來想想,要說收獲其實也算有的,就是我坐在會場,安裝了環(huán)境之后半天都沒搞明白怎么把日志塞進(jìn)去。。。一堆的選項,都不知道點哪個好。再后來,就入坑了(具體是怎么入的參見《自動化運維軟件設(shè)計實戰(zhàn)》。。血淚史 (≡ω≡.) )

經(jīng)歷了一系列系統(tǒng)開發(fā)與運維后,其實作為開發(fā)者,我希望我接入的日志管理系統(tǒng)是這樣的。

能夠讓我輕易的就把日志放進(jìn)去

也算是當(dāng)初剛上手Splunk的不滿之一,太多的選項,都不知道點哪個,點下去會不會爆炸什么的。其實,作為開發(fā)者,我不就想把一些日志都收集起來,方便找嘛

不要一上來就要我寫正則式

寫了這么久程序,反正我是記不住幾個正則式(/"≡ _ ≡)/~┴┴ (這反人類的正則式。。。我就只記住了.*)最好是能通過簡單的幾個符號就解決搜索的問題了(假如在谷歌或者百度上面搜個東西還要用正則式的話,請自行腦補(bǔ))

能夠搜索到上下文

有些時候日志打的很快,他們可能是不同線程打出來的,他們可能是不同服務(wù)器打出來的(不過帶有一定的先后性),他們可能是不同應(yīng)用打出來的,這個時候上下文就很重要了,沒有了上下文,無論是運維還是開發(fā),在排除的時候都只能看到一個點,沒辦法根據(jù)實際的情況進(jìn)行排查。遇到復(fù)雜問題的時候也就這么2種處理方法。一種是:哦,這樣啊,我試了沒什么問題啊,要不,你下次再做操作的時候我這邊也一起看看?另外一種情況是:這樣啊,我們花時間查查究竟是什么原因(有很大幾率是查不出來的ㄟ( ▔, ▔ )ㄏ )然后就不了了之了。所以上下文其實是挺重要的。這個地方出錯了,那前面發(fā)生了什么事情了呢?

能夠?qū)θ罩具M(jìn)行平行的分析

場景1:在應(yīng)用穩(wěn)定之前,我基本上都是采取單服務(wù)器的方式跑,有些小伙伴會說,你這樣單點了呢,不夠可靠。且不說應(yīng)用未完全穩(wěn)定之前會對程序頻繁的進(jìn)行改動導(dǎo)致發(fā)布的不便(好吧,這個時候那些搞CI的就會跳出來了,我只能說,事情總不是想象中那么順利的(′Д`) ,而且。。我一個人的話,我也懶得去搞就是了,哈哈),特別是多臺服務(wù)器打日志的時候,我就會很煩惱,究竟這個請求落到哪臺服務(wù)器上了? 報的什么樣的錯誤?為什么其他服務(wù)器上又不會等等問題。碰到這種情況下,也就只能一臺一臺的登上去,tail -f xxxx.log,然后喊:”麻煩。。再點一次試試“。

場景2:小菜找到DBA,覺得數(shù)據(jù)庫的主從是不是沒同步到,DBA登上主庫打開binlog,再登上從庫打開binlog,看完日志之后,告訴小菜,從日志上來看,他們是同步的。

能夠提取一些有價值的數(shù)據(jù),做點圖表

小菜在調(diào)用公司另外一個業(yè)務(wù)的接口的時候速度慢的不行,對方總說沒問題啊,我這邊看都挺好的。小菜心想,好吧,你不認(rèn)賬,我給你放個監(jiān)控,每分鐘都撥測你一下,等我手里有數(shù)據(jù)了,我還怕你不成?結(jié)果一周下來了,監(jiān)控到的指標(biāo)性能都挺不錯的,但是用戶還是反應(yīng)調(diào)用接口的時候性能很差。無奈的小菜翻了翻服務(wù)器上自己每次調(diào)用接口打出來的日志,的確是挺慢的。但是小菜也沒辦法,這。。舊的日志自己當(dāng)做垃圾數(shù)據(jù)給rm掉了,新的數(shù)據(jù)有是有那么些,但是一方面數(shù)據(jù)量不夠,另外一方面,自己再去這么一堆日志文件里面提取挺費勁的,╮(╯▽╰)╭趕進(jìn)度趕進(jìn)度,性能的事情以后再說吧。

能夠產(chǎn)生告警

監(jiān)控告警這種事情本應(yīng)該是監(jiān)控系統(tǒng)干的,但是從日志上出發(fā),也會給我們帶來不一樣的想法:在一個陽光明媚的早上,小菜熟練的打開了MySQL的客戶端工具,在鍵盤下敲下來select * from .... 結(jié)果半天回不來結(jié)果?”奇怪?昨天都還很正常的啊?“于是趕緊向DBA求助,DBA登上服務(wù)器一看日志,發(fā)現(xiàn)服務(wù)器磁盤滿了。。。。當(dāng)然這種情況在生產(chǎn)環(huán)境下還是比較少見的,但是另外一種情況就比較多見了。B系統(tǒng)對A系統(tǒng)提供了對外的接口,A系統(tǒng)調(diào)用后出現(xiàn)調(diào)用失敗,或者B系統(tǒng)返回調(diào)用成功但實際上卻是調(diào)用失敗的情況。這種時候就應(yīng)該出現(xiàn)告警信息,提醒我們需要留意這個事件了,不然對于某些關(guān)鍵業(yè)務(wù)很容易就會出大問題的。(同時也保留一些罪證,哈哈哈o(*≧▽≦)ツ┏━┓)

小結(jié)

日志管理應(yīng)用能夠做的事情其實也挺多的,以上只是一些比較零散的點,晚上泡完腳突然有些想法,寫下來順便分享一下(話說晚上泡個腳還是挺舒服的(?????)? ?? )但是都是從實際應(yīng)用上出發(fā)提出的。看到過有些廠商貌似做了個服務(wù)器掛了之后就把日志傳回去,然后自動生成一個case,接著就會有人處理了(好吧,反正我就只看過這種推廣 (′?ω?`)。。實際是不是這個效果我就不知道了)。

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點,簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。
  • 序言:七十年代末,一起剝皮案震驚了整個濱河市,隨后出現(xiàn)的幾起案子,更是在濱河造成了極大的恐慌,老刑警劉巖,帶你破解...
    沈念sama閱讀 230,501評論 6 544
  • 序言:濱河連續(xù)發(fā)生了三起死亡事件,死亡現(xiàn)場離奇詭異,居然都是意外死亡,警方通過查閱死者的電腦和手機(jī),發(fā)現(xiàn)死者居然都...
    沈念sama閱讀 99,673評論 3 429
  • 文/潘曉璐 我一進(jìn)店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來,“玉大人,你說我怎么就攤上這事。” “怎么了?”我有些...
    開封第一講書人閱讀 178,610評論 0 383
  • 文/不壞的土叔 我叫張陵,是天一觀的道長。 經(jīng)常有香客問我,道長,這世上最難降的妖魔是什么? 我笑而不...
    開封第一講書人閱讀 63,939評論 1 318
  • 正文 為了忘掉前任,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘。我一直安慰自己,他們只是感情好,可當(dāng)我...
    茶點故事閱讀 72,668評論 6 412
  • 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著,像睡著了一般。 火紅的嫁衣襯著肌膚如雪。 梳的紋絲不亂的頭發(fā)上,一...
    開封第一講書人閱讀 56,004評論 1 329
  • 那天,我揣著相機(jī)與錄音,去河邊找鬼。 笑死,一個胖子當(dāng)著我的面吹牛,可吹牛的內(nèi)容都是我干的。 我是一名探鬼主播,決...
    沈念sama閱讀 44,001評論 3 449
  • 文/蒼蘭香墨 我猛地睜開眼,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了?” 一聲冷哼從身側(cè)響起,我...
    開封第一講書人閱讀 43,173評論 0 290
  • 序言:老撾萬榮一對情侶失蹤,失蹤者是張志新(化名)和其女友劉穎,沒想到半個月后,有當(dāng)?shù)厝嗽跇淞掷锇l(fā)現(xiàn)了一具尸體,經(jīng)...
    沈念sama閱讀 49,705評論 1 336
  • 正文 獨居荒郊野嶺守林人離奇死亡,尸身上長有42處帶血的膿包…… 初始之章·張勛 以下內(nèi)容為張勛視角 年9月15日...
    茶點故事閱讀 41,426評論 3 359
  • 正文 我和宋清朗相戀三年,在試婚紗的時候發(fā)現(xiàn)自己被綠了。 大學(xué)時的朋友給我發(fā)了我未婚夫和他白月光在一起吃飯的照片。...
    茶點故事閱讀 43,656評論 1 374
  • 序言:一個原本活蹦亂跳的男人離奇死亡,死狀恐怖,靈堂內(nèi)的尸體忽然破棺而出,到底是詐尸還是另有隱情,我是刑警寧澤,帶...
    沈念sama閱讀 39,139評論 5 364
  • 正文 年R本政府宣布,位于F島的核電站,受9級特大地震影響,放射性物質(zhì)發(fā)生泄漏。R本人自食惡果不足惜,卻給世界環(huán)境...
    茶點故事閱讀 44,833評論 3 350
  • 文/蒙蒙 一、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧,春花似錦、人聲如沸。這莊子的主人今日做“春日...
    開封第一講書人閱讀 35,247評論 0 28
  • 文/蒼蘭香墨 我抬頭看了看天上的太陽。三九已至,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間,已是汗流浹背。 一陣腳步聲響...
    開封第一講書人閱讀 36,580評論 1 295
  • 我被黑心中介騙來泰國打工, 沒想到剛下飛機(jī)就差點兒被人妖公主榨干…… 1. 我叫王不留,地道東北人。 一個月前我還...
    沈念sama閱讀 52,371評論 3 400
  • 正文 我出身青樓,卻偏偏與公主長得像,于是被迫代替她去往敵國和親。 傳聞我的和親對象是個殘疾皇子,可洞房花燭夜當(dāng)晚...
    茶點故事閱讀 48,621評論 2 380

推薦閱讀更多精彩內(nèi)容