“선이 너저분해서 꽂았을 뿐인데?”… 신임 지사장의 황당한 ‘정리벽’에 50억 날아간 IT 대참사

평온하던 금요일 오후 5시, 모든 직장인이 퇴근 시계만 바라보던 그 시간. 글로벌 물류 테크 기업의 본사 관제 모니터가 일제히 핏빛 경고를 쏟아내기 시작합니다.

전국 14개 물류 거점의 서버가 순식간에 암전 상태에 빠집니다. 배송 트럭 수백 대가 고속도로 위에서 멈춰 섰고, 분당 수억 원이 결제되던 플랫폼 API가 줄줄이 파무침이 됩니다. 모니터링 팀은 패닉에 빠졌습니다. 초당 수십만 개의 정체불명 패킷이 쏟아져 들어오자 보안실은 러시아 해커의 국가급 사이버 테러를 확신합니다.

Read next대기업 후원 없이 버틴 잊혀진 언어 'Pony'와 엔지니어 눈물로 만든 IT 인디 게임

하필 그 시각, 데브옵스 팀은 다음 주 프로모션을 위해 '금요일 배포 금지'라는 천벌 받을 금기를 깨고 긴급 패치를 프로덕션에 밀어 넣은 직후였습니다. 엔지니어들은 배포가 꼬였는지 해킹을 당했는지조차 분간하지 못한 채, 무려 40명이 넘는 개발자가 주말 내내 36시간 동안 피눈물을 흘리며 밤을 지새웠습니다. 누락된 주문만 1만 8천 건, 직접 피해액은 50억 원을 가볍게 돌파했습니다.

하지만 일요일 새벽, 핏발 선 눈으로 현장에 급파된 베테랑 네트워크 엔지니어가 밝혀낸 테러범의 정체는 모니터 앞의 천재 해커가 아니었습니다. 범인은 중부 물류센터 2층 회의실 구석에 있었습니다.

새로 부임한 지사장이 회의실 바닥에 뒹굴던 50cm짜리 파란색 랜선이 "지저분하다"는 이유로, 벽면 포트에 꽂힌 채 반대쪽이 비어 있던 선을 집어 들었습니다. 그리고는 테이블 아래 공유기 허브의 빈 구멍에 아주 '단정하게' 꽂아 넣었던 것입니다. 선 양쪽이 같은 스위치로 연결되는 순간, 패킷이 영원히 돌고 도는 악마의 굴레 '브로드캐스트 스톰'이 터졌습니다.

과거 외주 업체가 프린터가 자꾸 끊긴다는 불평을 막으려고 루프 방지 기능(STP)을 몰래 꺼두었던 과거의 기술 부채가 마침내 시한폭탄처럼 폭발한 것입니다. 한 네티즌은 "비IT 출신 임원의 청소 본능이 첨단 클라우드 아키텍처를 맨손으로 찢어발겼다"며 탄식했고, 또 다른 엔지니어는 "3년 전 외주 업체의 편의주의와 금요일 배포가 낳은 완벽한 환장의 하모니"라고 혀를 내둘렀습니다.

지사장은 억울함을 호소했습니다. "선 정리를 깔끔하게 했을 뿐인데 어떻게 대기업 시스템이 통째로 날아가느냐"는 항변이었습니다. 과연 이 참사는 무지한 관리자의 과실일까요, 아니면 사소한 장난감 칼질에도 무너지는 허약한 시스템을 방치한 IT 인프라의 예견된 파멸이었을까요?

이 황당무계하면서도 눈물겨운 전산실 잔혹사의 전말과 엔지니어들의 36시간 사투 비화는 팟캐스트 방송에서 본격적으로 펼쳐집니다.