記一次網(wǎng)絡(luò)問題的排查

AprilJ 發(fā)布于2019-06-28 15:18 / 952人閱讀

摘要：昨天遇到了一個(gè)端口轉(zhuǎn)發(fā)導(dǎo)致失效的問題，今天記錄下當(dāng)時(shí)的排查思路。問題原因是刪除容器后沒有把轉(zhuǎn)發(fā)規(guī)則刪除。這次排查，用到了幾個(gè)工具，都是之前的積累，所以排查顯得順暢多了。

昨天遇到了一個(gè)端口轉(zhuǎn)發(fā)導(dǎo)致VIP失效的問題，今天記錄下當(dāng)時(shí)的排查思路。

因?yàn)橐錾?jí)，所以我刪除了dokcer老容器，并啟動(dòng)新容器。之后訪問VIP, 也就是LVS中的VIP，發(fā)現(xiàn)原先可以訪問的站點(diǎn)不能訪問了。

以上是故障表現(xiàn)，下面是具體排查過程

docker logs containerId 檢查docker 中的應(yīng)用是成功啟動(dòng)的，排除應(yīng)用無法啟動(dòng)的問題

curl localhost:80 因?yàn)槿萜魇且?b>-p 80:80的方式啟動(dòng)的，所以接下來我嘗試在物理機(jī)上訪問自己的80端口，發(fā)現(xiàn)可以成功訪問應(yīng)用，排除了forward沒設(shè)置的問題

接下來，我祭出了瑞士軍刀nc -l 80, 然后在外部以VIP的方式訪問，發(fā)現(xiàn)無法訪問。這時(shí)候懷疑是 iptables 的問題

先做下備份，service iptables save, 然后關(guān)掉service iptables stop

再起nc -l 80, 發(fā)現(xiàn)很快nc進(jìn)程就結(jié)束了，trace nc -l 80 找出來源包IP，發(fā)現(xiàn)是LVS的心跳包。至此VIP恢復(fù)訪問

接下來就是要找iptables里誰在搞鬼了。iptables -L, 因?yàn)閼岩墒莇ocker在搞鬼，所以把展示出和docker有關(guān)的都刪了，但是問題沒有解決

上面我犯了一個(gè)錯(cuò)誤，那就是以為iptables -L展示的是所有的規(guī)則，但其實(shí)只展示了filter, 和轉(zhuǎn)發(fā)有關(guān)的nat需要iptables -t nat -L來展示

把iptables -t nat -L中和docker有關(guān)的刪掉。問題解決。問題原因是docker刪除容器后沒有把轉(zhuǎn)發(fā)規(guī)則刪除。

又重現(xiàn)了下這個(gè)問題，應(yīng)該是docker的問題，刪除實(shí)例沒有把轉(zhuǎn)發(fā)規(guī)則和proxy干掉。

這次排查，用到了幾個(gè)工具，都是之前的積累，所以排查顯得順暢多了。主要時(shí)間花在了對(duì)iptables的不熟悉。
更多文章 http://kamushin.github.io/

GPU云服務(wù)器云服務(wù)器記一次在阿里云搭建服務(wù)器記一次阿里云服務(wù)器集體中毒 apache問題排查服務(wù)器一般問題排查

文章版權(quán)歸作者所有，未經(jīng)允許請(qǐng)勿轉(zhuǎn)載,若此文章存在違規(guī)行為，您可以聯(lián)系管理員刪除。

轉(zhuǎn)載請(qǐng)注明本文地址：http://m.specialneedsforspecialkids.com/yun/26658.html

登陸后可評(píng)論

我要關(guān)注我要私信

国产xxxx99真实实拍_久久不雅视频_高清韩国a级特黄毛片_嗯老师别我我受不了了小说