故障處理之記一起倒庫多次，找兒子的過程

IT那活兒發布于2023-01-11 13:20 / 1039人閱讀

故障處理之記一起倒庫多次，找兒子的過程

“XX庫又倒了”，最近這已成為大家的一句口頭禪了。心里雖然碎碎念念，但身體還是很誠+順滑的登上了環境。所有日志擼了一圈兒，確定還是之前的老毛病。

最近半個月，前前后后宕了6次。看到這兒，擼友們可能會有疑惑，萎了這么多次，難道還沒找到原因嗎？你們媳婦兒脾氣可真好，不會跳？不會給送你個草色的帽子啥滴。。。

大胸弟，先別急，哥先簡單介紹下情況，這個庫是邊緣的庫，11G單實例。宕個一兩次影響也不大，但是這樣5～6次的搞，再強的漢子臉上也繃不住啊。

其實這個故障，在第一次萎的時候，我們就核查到是由于磁盤鏈路異常或其他網絡相關問題導致（SAN網絡相關原因），相關故障處理及結論也郵件各方，并請求網絡側進行核查。

后面通過溝通得知在故障之前進行過網絡改造，但網絡側也是提起褲子就不認兒子的主兒，一句話正常（我沒做，我沒干，我沒漏）。后面正如大家看到的，半個月泄了6次（內褲都洗不贏了）。就這種內褲都沒有了的情況下，網絡側還反饋正常。。。。。。

看來要想網絡側承認兒子是他的，得做DNA親子鑒定了。

以最近捉奸現場為例，分析如下：

1、主機日志顯示04:42:30時刻點磁盤offline

2、asm日志顯示04:42:30時刻點，DG盤DWDATA2、DWDATA的磁盤offline，I/O讀寫掛起，磁盤組被強制dismount

3、數據庫alert日志顯示04:42:30磁盤無法讀寫。

4、報錯涉及的部分數據文件如下:

5、故障時間點，通過oswatch可以看到當時主機負載并不高

半個月以來共出現6次故障（每次都是同一個姿勢），經核查，故障時間點，主機負載正常，cpu、內存資源充足，操作系統日志均顯示有磁盤offline，數據庫alert日志顯示磁盤無法進行讀寫，asm日志顯示無法讀寫磁盤，強制dismount DG盤。

結合數據庫日志，asm日志，操作系統日志可以看出是由于磁盤offline導致數據庫無法讀寫磁盤進而導致數據庫宕掉。

所以，還是之前的結論：相關SAN網絡導致磁盤 offline，產生一系列數據庫層面的故障。

其實捉奸不是目的，只是為了更好的解決問題，有時候紅紅脖子，拍拍屁股也挺好，這樣更容易讓各方認兒子。當然如果有其他的高效認兒子的方式更好，總是這樣拿著高倍攝像機，看的人也焦躁。

當然，安慰自己的方式就是：做的就是幫人提褲子，認兒子的活兒，也是本職工作吧。

云服務器 GPU云服務器 asp找不到存儲過程故障處理服務器故障處理數據處理過程

文章版權歸作者所有，未經允許請勿轉載,若此文章存在違規行為，您可以聯系管理員刪除。

轉載請注明本文地址：http://m.specialneedsforspecialkids.com/yun/130236.html

【零基礎入門】 css學習筆記（3）選擇器與層疊性

摘要：，高級選擇器后代選擇器空格表示后代選擇器就是的后代所有的。注意是后代，并不一定是兒子空格可以出現多次補充后代選擇器中出現的東西很靈活，可以是標簽，可以是名，可以是名后代選擇器，就是一種平衡共性特性的平衡。一，選擇器 1，基礎選擇器 1）標簽選擇器：div{ } ，選擇的所有，而不是一個，用來描述共性。 2）類選擇器：.class名{ } 多個元素可以同時屬...

cppprimer 2019-08-29 15:43 評論0 收藏0
關于繼承的那些事！

摘要：格式子類名父類名好處提高了代碼的復用性提高了代碼的維護性通過少量的修改，滿足不斷變化的具體要求讓類與類產生了一個關系，是多態的前提要求有共同的屬性或操作有細微的差別繼承的弊端讓類的耦合性增強。 showImg(https://segmentfault.com/img/remote/1460000019321816?w=600&h=242); 第二階段 JAVA面向對象第二章繼承其...

soasme 2019-08-16 17:42 評論0 收藏0
兒子著迷游戲，程序員父親辭職創業帶火了少兒編程培訓

摘要：歲的余宙華是少兒編程培訓機構阿兒法營的創辦者，也是這個培訓機構課程體系的主要研發者。如今少兒編程培訓行業正越來越熱，最近幾年國內的少兒編程培訓機構雨后春筍般一個個地冒出來。這時，余宙華意識到是他作為父親出手的時候了。什么是計算機的靈魂？余宙華用孩子式的語氣問長桌旁坐著的小女孩。小女孩認真地想了半天，有些靦腆地猶豫著給出了余宙華期待的答案：程序。 2018年7月，我在阿兒法營海淀人大...

kidsamong 2019-06-26 18:33 評論0 收藏0
開發遇到瓶頸離職，體驗了一把“自由職業”，最后入行測試···

摘要：說干就干，年底就去上海體驗了一把滬漂，這場旅行在年落幕，之后回到西安，開始為自己的自由職業做準備，之后條件成熟便從企業中走出來，以技術寫作為生，開啟了為期半年的自由職業。 ...

chenjiang3 2021-09-10 10:51 評論0 收藏0
css

摘要：一選擇器注釋注釋內容與的結合方式的引用直接在標簽中引用在頭部采用選擇器加屬性的方式引用在文件中以后常用在頭部用選擇器加屬性引用引用標簽引用指定的文件指的是引用的類型表示引用路徑直接在標簽中引用選擇器加屬性文　一 , css選擇器　　1, css注釋　　　　/*注釋內容*/ 　　2, HTML與css的結合方式 (css的引用) 　　　1 , 直接在標簽中引用; 　　　2, 在頭部采用選...

番茄西紅柿 2019-04-23 13:25 評論0 收藏0
TypeScript極速完全進階指南-2中級篇

摘要：抽象類就是只是用來繼承而不是實現的類。這里我解釋清楚沒有為什么會有抽象類。接口就是這么一個玩意，我們看看你劉姨的需求。好，我們繼續那個沉重的話題分割我的財產，上一篇TypeScript極速完全進階指南-1初級篇我兒子確實拿到錢了， class Person{ name:string; age:number; food:string = 剁椒魚頭;//外面賦值這...

rozbo 2019-08-22 16:37 評論0 收藏0