Продолжаем разбирать классику Артура Блоха. После седьмого следствия (“невозможно сделать что-либо защищённым от дурака, потому что дураки чрезвычайно изобретательны”) — восьмое:
«Если вы предусмотрели четыре способа, которыми процедура может пойти не так, и устранили их — тут же проявится пятый»
После инцидента закрываешь найденные сценарии отказа один за другим: runbook, алерт, ретрай, лимит. Пятый сценарий, которого никто не предполагал, ждёт своего часа не потому что защита плохая, а потому что пространство возможных отказов конечно только на бумаге постмортема.
#юмор #murphy #sysadmin