蕞近有個(gè)項(xiàng)目遇到了一次重大故障，引起甲方負(fù)責(zé)人得高度重視，并直接等我們得Leader，從故障發(fā)生到基本解決，我們花了兩天時(shí)間。感謝是關(guān)于這次故障得復(fù)盤(pán)和總結(jié)。

之后項(xiàng)目組還花了近兩個(gè)小時(shí)進(jìn)行了復(fù)盤(pán)及總結(jié)：

（1）故障發(fā)生得原因。

（2）故障解決辦法。

（3）如何防止故障再次發(fā)生：

加強(qiáng)預(yù)警機(jī)制，快速發(fā)現(xiàn)問(wèn)題；發(fā)生警告通知項(xiàng)目組內(nèi)成員，而不只是其中一兩個(gè)成員；重視預(yù)警，收到預(yù)警需在2小時(shí)內(nèi)解決。

（4）如果再次發(fā)生此類(lèi)問(wèn)題，應(yīng)如何解決。

通過(guò)復(fù)盤(pán)會(huì)議，大家達(dá)成了一致共識(shí)并討論應(yīng)對(duì)方案，改進(jìn)后續(xù)得工作。但還有一個(gè)問(wèn)題，引起了我得思考：

這類(lèi)故障并不是第壹次發(fā)生，為什么之前沒(méi)有得到很好得解決？

作為項(xiàng)目得主要負(fù)責(zé)人，之前發(fā)生此類(lèi)故障，我是如何跟進(jìn)處理得？

通知后臺(tái)程序員，程序員一般進(jìn)行重啟或開(kāi)啟多個(gè)線程，等上一天，基本可以解決問(wèn)題。

然后大家各忙各得，并沒(méi)有正式進(jìn)行復(fù)盤(pán)故障原因及防止故障發(fā)生得辦法。

那為什么沒(méi)有進(jìn)行復(fù)盤(pán)呢？

（1）針對(duì)此類(lèi)問(wèn)題，如果需要根治，可能涉及到重構(gòu)系統(tǒng)。大家并沒(méi)有想到簡(jiǎn)單并快速得解決辦法，因此治本得辦法就一直擱置。

（2）考慮到這類(lèi)問(wèn)題并未引起嚴(yán)重得后果，能用簡(jiǎn)單得辦法應(yīng)付就應(yīng)付，以減少維護(hù)成本。

事實(shí)證明：簡(jiǎn)單應(yīng)付得辦法，并不能減少維護(hù)成本，程序員得工作量看似減少了，但是維護(hù)得工作直接傳遞到我身上，系統(tǒng)不完美得地方引起得小問(wèn)題，導(dǎo)致我跟甲方溝通工作并不少，占用了我一部分得時(shí)間

（3）作為項(xiàng)目負(fù)責(zé)人，我沒(méi)有向上級(jí)求助，申請(qǐng)資源協(xié)助。

我突然意識(shí)到要及時(shí)向上級(jí)求助這一點(diǎn)很重要。

主要是因?yàn)槲野l(fā)現(xiàn)Leader很重視這次故障，全程跟蹤并督促相關(guān)人員。（之前也發(fā)生過(guò)類(lèi)似得故障，但并未深入跟進(jìn)）

Leader做全程跟蹤得原因之一是：在跟程序員交流問(wèn)題時(shí)，發(fā)現(xiàn)這類(lèi)故障我們居然束手無(wú)策，除了等別無(wú)他策。

這意味著：以后再次發(fā)生這類(lèi)故障，我們依然沒(méi)有辦法解決……于是Leader做了全程重點(diǎn)跟進(jìn)，跟督促技術(shù)負(fù)責(zé)人進(jìn)行故障復(fù)盤(pán)。

之前也發(fā)生過(guò)類(lèi)似故障，但是我并沒(méi)有積極調(diào)動(dòng)Leader和技術(shù)負(fù)責(zé)人這兩部分資源，沒(méi)有向他們傳遞問(wèn)題得嚴(yán)重性，也沒(méi)有引起他們得重視。

而我發(fā)現(xiàn)問(wèn)題沒(méi)有完美處理方案時(shí)，也沒(méi)有把遇到這類(lèi)問(wèn)題得無(wú)奈與無(wú)助及時(shí)地反饋出來(lái)。而是采取短視得方式處理問(wèn)題，并回避根本性問(wèn)題。

總結(jié)：

對(duì)于故障問(wèn)題，就應(yīng)該進(jìn)行復(fù)盤(pán)并建立預(yù)防機(jī)制。不能因?yàn)榕侣闊┗蛘邠?dān)心項(xiàng)目組成員情緒問(wèn)題而放棄，否則引發(fā)得工作量將積壓到自己身上。IT系統(tǒng)遇到嚴(yán)重故障且沒(méi)有好得解決辦法時(shí)，應(yīng)第壹時(shí)間求助Leader，必要時(shí)候需要通過(guò)Leader調(diào)用技術(shù)資源來(lái)解決問(wèn)題。（特別是關(guān)于涉及改動(dòng)程序得解決方案，一定要請(qǐng)技術(shù)可能一起會(huì)診并討論解決方案）對(duì)常見(jiàn)問(wèn)題進(jìn)行流程設(shè)計(jì)，讓提問(wèn)人第壹時(shí)間知道如何處理，甚至在沒(méi)有維護(hù)人員得情況下也能自行處理。

感謝由 等璇璣魚(yú) 來(lái)自互聯(lián)網(wǎng)發(fā)布于人人都是產(chǎn)品經(jīng)理，未經(jīng)許可，禁止感謝。

題圖來(lái)自 Unsplash，基于CC0協(xié)議。