어떤 게임인가요?
장애 대응, 버텨냅니다.는 "새벽에 휴대폰이 울리고, 아침까지 알람이 끝없이 이어지는" 온콜의 밤을 그대로 하룻밤짜리 게임으로 만든 것입니다. 화면은 위에서 내려다본 새벽의 서버실. 검은 바탕에 초록색 글자, LED가 깜빡이는 랙 사이로 노란 WARN, 빨간 500, 점점 커지는 메모리 누수 같은 알람 상자들이 다가옵니다. 플레이어는 손가락으로 이동하기만 하면 되고, 명령어는 자동으로 실행되며, 왼쪽 아래에는 $ grep -r ERROR /var/log 같은 명령어 로그가 흘러갑니다.
처리한 알람은 "해결된 티켓"을 떨어뜨리고, 주워서 레벨이 오르면 시간이 멈추며 세 가지 후보 중에서 새 명령어나 패시브를 하나 고릅니다. 게임 속 시계는 2:00에 시작해 현실의 1초에 1분씩 갑니다. 체력에 해당하는 것은 "가용률"로, 100.00%에서 시작해 알람에 닿거나 팀장님이나 DB의 탄에 맞으면 떨어집니다. SLA인 99.0% 아래로 떨어지면 "SLA 위반"으로 끝나고, 9:00에 동료가 "좋은 아침입니다, 어젯밤에 무슨 일 있었어요?" 하며 출근하면 클리어입니다.
끝나면 결과가 "장애 보고서"로 나옵니다. 발생일, 대응 시간, 최저 가용률, 주요 원인, 실행한 명령어, 재발 방지 대책까지 적힌 보고서를 이미지로 저장하거나 그대로 공유할 수 있습니다.
게임의 특징
명령어가 무기. grep 레이저로 일렬의 알람을 꿰뚫는다
명령어는 6종류. 이동 방향으로 초록색 레이저를 쏴서 일렬로 늘어선 알람을 한꺼번에 꿰뚫는 "grep"(첫 명령어), 몇 초마다 나를 중심으로 큰 원을 터뜨리는 "재시작", 사방으로 퍼지는 파동으로 알람을 바깥으로 밀어내는 "롤백", 패치 탄이 가장 가까운 알람을 쫓아가는 "핫픽스", 작은 서버들이 주위를 돌며 근처의 알람을 쏘는 "오토스케일링", 주변 알람의 움직임을 느리게 하는 "레이트 리밋"입니다. 이중화(받는 대미지 −10%), Runbook(탄 수 +1), CI/CD(공격 간격 −8%), 커피(이동 속도 +10%), 쪽잠(가용률 자연 회복), 모니터링 대시보드(티켓 줍는 범위 +20%) 6종류의 패시브와 조합할 수 있고, 명령어와 패시브는 각각 4개까지 가질 수 있습니다.
명령어 Lv5 + 대응하는 패시브로 "진화"
명령어를 최대 Lv5로 올리고 정해진 패시브를 가지고 있으면, 레벨 업 후보에 금색 테두리의 "진화"가 나옵니다. grep+모니터링 대시보드는 레이저 4개가 회전하며 사방을 스캔하는 "옵저버빌리티", 재시작+이중화는 큰 원 다음에 몇 초간 무적이 되는 "무중단 배포", 오토스케일링+CI/CD는 레플리카가 최대 8대로 늘어나는 "Kubernetes", 핫픽스+Runbook은 패치 탄이 맞을 때마다 분열해 연쇄하는 "자동 복구 스크립트"가 됩니다.
알람이 알람을 부르고, 아침에는 트래픽 피크, 마지막은 운영 DB
알람은 시간이 지날수록 늘어나고 면면도 바뀝니다. 3:00부터 1시간 동안은 "알람이 알람을 부른다"로 처리한 알람이 WARN 2개로 분열하고, 4:00에는 야간 배치가 한꺼번에 돌기 시작해 사방에서 WARN이 몰려옵니다. 방치하면 커지는 메모리 누수, 원을 그리며 다가오는 무한 루프, 느리고 단단한 타임아웃(504)도 가세합니다. 5:00에는 중간 보스 팀장님이 "지금 상황 어때요?" 채팅 말풍선을 쏘며 쫓아오고, 6:00〜7:00은 요청 폭주가 띠 모양으로 몰려오는 아침 트래픽 피크, 7:30에는 인증서 만료로 알람이 빨라집니다. 그리고 8:00, 보스 "운영 DB 전면 장애"가 사방으로 SELECT * 쿼리 탄을 쏘며 나타납니다.
SLA를 깨도 "온콜 수당"으로 다음 밤이 편해진다
7:30이 지나 SLA 아래로 떨어지려 할 때는 딱 한 번 SRE팀 지원군이 와서 부활합니다. 끝날 때마다 처리한 알람 수와 서비스를 유지한 시간에 따라 "온콜 수당"을 받고(9:00까지 버티면 80을 더 받음), 타이틀 화면의 "기술 서적·스터디"에서 장애 훈련·포스트모템 문화·단축키 스터디·기술서 북스터디·설계 리뷰 같은, 다음 밤부터 계속 효과가 있는 강화를 살 수 있습니다(각 Lv5까지). 베테랑 SRE·풀스택 엔지니어·CTO 3명의 캐릭터는 각각 5:00까지 서비스 유지·누적 1,000건 처리·9:00까지 한 번 버티기로 해금됩니다(처음부터 쓸 수 있는 신입 인프라 엔지니어까지 4명). 날짜마다 모두가 같은 밤을 플레이하는 "오늘 밤의 장애"(일요일은 적고, 금요일은 "금요일 릴리스 뒷수습"으로 가장 많음), 각 알람의 "현업 공감 포인트"를 읽을 수 있는 알람 도감, 숨은 업적 1개를 포함한 13개의 업적도 있습니다.
하룻밤 진행 예시
"신입 인프라 엔지니어"(grep으로 시작)로 플레이했을 때 일어나는 일의 순서입니다. 나오는 알람과 레벨 업 후보는 매번 달라집니다.
| 시각 | 일어나는 일 | 이때의 요령 |
|---|---|---|
| 2:00 | 휴대폰 호출음과 함께 시작. WARN 알람 몇 개가 다가온다 | 2:12쯤 근처에 떨어져 있는 "에스컬레이션"으로 티켓을 모은다 |
| 3:00 | "알람이 알람을 부른다": 1시간 동안 처리한 알람이 WARN 2개로 분열한다 | grep 레이저로 일렬로 꿰뚫으면 분열한 알람도 한꺼번에 처리된다 |
| 4:00 | 야간 배치가 한꺼번에 돌기 시작해 사방에서 WARN이 몰려온다. 무한 루프도 나오기 시작한다 | 포위되기 전에 비어 있는 쪽으로 빠져나간다 |
| 5:00 | 중간 보스 팀장님의 "지금 상황 어때요?". 6:30까지 납득시키지 못하면 다음 회의로 돌아간다 | 채팅 말풍선을 피하면서 명령어를 맞힌다 |
| 6:00〜7:00 | 아침 트래픽 피크. 요청 폭주가 오른쪽·왼쪽·위에서 띠 모양으로 몰려온다 | 하룻밤 중 알람이 가장 많은 시간. 진화를 하나 만들어 두고 싶다 |
| 7:30 | "인증서 만료": 30분 동안 화면이 경고색이 되고, 알람이 빨라진다 | 이때부터는 딱 한 번 SRE팀 지원군이 부활시켜 준다 |
| 8:00 | 보스 "운영 DB 전면 장애". 쿼리 탄을 쏘고 500 에러를 끌고 온다 | 9:00에 DB가 멈춘 상태라면 시계가 8:59에서 멈추고, 30초 안에 복구하면 클리어. 30초가 지나면 동료가 넘겨받아 클리어 |
| 9:00 | 동료가 출근해서 클리어. 장애 보고서가 나온다 | 보고서를 저장하거나 공유하고, 온콜 수당으로 강화를 산다 |
자동 플레이(가까운 알람에서 도망치고 티켓을 줍기만 하는 단순한 것)로 4번씩 확인했을 때, 강화가 없으면 3번은 6시대 아침 트래픽 피크에서 SLA 위반이 됐고 1번은 7:47까지 버텼습니다. 강화 4종을 Lv2까지 올리면 4번 중 2번은 9:00을 맞이했습니다. 첫날 밤은 6시대에 SLA 아래로 떨어지는 경우가 많고, 몇 번 플레이해서 강화를 갖추고 진화를 하나 만들면 9:00까지 버틸 수 있게 됩니다.
잘하는 요령
- grep 레이저는 이동하는 방향으로 나갑니다. 도망만 다니면 뒤의 알람을 처리하지 못하니, 가끔 알람이 일렬로 늘어선 쪽으로 방향을 돌리세요
- 여러 개를 조금씩 올리기보다 하나를 Lv5까지 올려 진화시키는 편이 강합니다. 레벨 업 카드에는 조합 상대가 적혀 있고, 상대를 이미 가진 카드는 초록색으로 빛납니다
- 메모리 누수는 방치할수록 커지고 단단해지며, 닿았을 때의 피해도 커집니다. 작을 때 먼저 처리하세요
- 가용률이 떨어지면 타임아웃이 자주 떨어뜨리는 "에너지 드링크"(게이지의 30% 회복)와, 8초 동안 가용률이 떨어지지 않는 "점검 모드"를 노리세요
자주 묻는 질문
- 요금이 드나요?
- 무료입니다. 회원 가입이나 앱 설치도 필요 없습니다.
- 한 판에 얼마나 걸리나요?
- 2:00부터 9:00까지 버티면 약 7분입니다. 도중에 SLA 위반이 되면 거기서 끝납니다. 일시 정지도 할 수 있습니다.
- 다른 언어로도 할 수 있나요?
- 일본어, 영어, 번체 중국어, 스페인어로도 할 수 있습니다. 규칙과 수치는 같습니다.
- PC에서도 할 수 있나요?
- 할 수 있습니다. WASD·방향키 또는 hjkl로 이동하고 Esc(또는 P)로 일시 정지, R로 HUD를 숨깁니다(녹화용). 레벨 업 3택은 1〜3 키로도 고를 수 있습니다.
- 실제 장애 대응에 참고가 되나요?
- 게임 속 회사, 시스템, 알람은 모두 가상이고, 명령어의 효과도 게임을 위해 만든 것입니다. 실제 장애 대응의 방법을 알려 주는 게임이 아니므로, 실제 장애에는 소속된 조직의 절차와 담당자의 판단에 따라 대응해 주세요. 실재하는 서비스 이름도 나오지 않습니다.
- 기록이 어딘가로 전송되나요?
- 온콜 수당, 기술 서적·스터디 강화, 해금한 캐릭터, 알람 도감, 업적, 최고 점수는 사용하는 브라우저에만 저장합니다. 플레이 경향을 알기 위해 게임 시작과 결과, 공유 등을 Google 애널리틱스로 보내지만, 이름 같은 개인을 특정하는 정보는 보내지 않습니다.
명령어·패시브·진화 목록과 밤의 시간표, 강화 가격, 캐릭터 해금 조건은 게임 방법에도 정리해 두었습니다.


