버그의 심각도를 보는 눈

오늘 신입이 넘긴 버그 리포트

아침에 출근했다. 신입이 어제 작성한 버그 리포트를 확인했다.

“캐릭터 점프 시 그림자 위치 어긋남 - Critical”

한숨 나왔다.

그림자 위치 문제는 Minor다. Critical이 아니다. 신입이니까 모를 수 있다. 나도 1년차 때는 모든 게 중요해 보였다.

심각도 재분류했다. Minor로.

그런데 같은 리포트 아래에 다른 버그가 있었다.

“상점에서 아이템 구매 시 골드 차감 안 됨 - Normal”

이건 반대다.

바로 심각도 올렸다. Critical로. 게임 경제 무너지는 버그다. 런칭 전에 못 잡으면 망한다.

신입한테 설명해줬다. “이건 Critical이야. 돈이 안 깎이면 유저들이 무한으로 살 수 있잖아.”

신입이 고개 끄덕였다. 그런데 표정을 보니 아직 감이 안 잡힌 것 같다.

당연하다. 나도 3년 걸렸다.

1년차 때는 모든 게 Critical

입사하고 첫 프로젝트가 MMORPG였다.

버그를 찾으면 무조건 심각도를 높게 매겼다. 내가 찾은 건 다 중요해 보였다.

“NPC 대사에 오타 - Critical” “UI 버튼 정렬 1픽셀 어긋남 - Major” “BGM 루프 시 0.1초 끊김 - Critical”

리드가 전부 다시 분류했다. Minor, Minor, Normal.

처음엔 이해 안 됐다. 오타도 버그고, 정렬도 안 맞고, 소리도 끊기는데 왜 심각하지 않은 거지?

리드가 말했다. “유저가 게임을 못 하면 Critical이야. 나머지는 나중에 고쳐도 돼.”

그때는 무슨 말인지 몰랐다.

첫 CBT 때 깨달았다.

런칭 3일 전. 버그가 300개 넘게 쌓였다. 다 고칠 수 없었다. 리드가 Critical만 골라냈다. 20개 정도.

나머지는 런칭 후 패치로.

그때 내가 Critical로 올렸던 버그들은 전부 패스됐다. 게임은 정상적으로 런칭됐다.

오타는 유저들이 캡처해서 커뮤니티에 올렸다. 웃음거리가 됐지만 게임은 돌아갔다.

그때 알았다. ‘심각도’는 우선순위다. 생존의 문제다.

2년차, 패턴이 보이기 시작함

두 번째 프로젝트는 RPG였다.

테스트하면서 버그 심각도를 매기는 속도가 빨라졌다.

“퀘스트 완료 후 보상 안 들어옴 - Critical” “던전 입장 시 로딩 무한 - Critical” “PVP 매칭 안 됨 - Major”

리드가 확인하고 고개 끄덕였다. “맞아. 이대로 올려.”

처음으로 재분류 안 당했다.

패턴이 생겼다.

유저가 진행을 못 하면 Critical. 유저가 손해를 보면 Critical. 서버가 죽으면 Critical.

나머지는 Major 이하.

던전에 못 들어가면 진행 불가. Critical. 보상을 못 받으면 손해. Critical. PVP는 필수 콘텐츠는 아님. Major.

이 기준이 생기니까 판단이 빨라졌다.

그런데 아직 헷갈리는 경우가 있었다.

“레이드 보스 패턴 2페이즈에서 스킬 안 씀”

이건 뭐지? 버그는 맞다. 그런데 심각도는?

기획서 확인했다. 2페이즈에서 광역기를 써야 하는데 안 쓴다. 보스가 너무 쉬워진다.

일단 Major로 올렸다.

다음날 리드가 불렀다.

“이거 Critical이야. 밸런스 붕괴야. 레이드 난이도가 존재 의미를 잃어.”

아, 맞다. 레이드는 엔드 콘텐츠다. 여기가 쉬우면 유저들이 할 게 없다. 게임 수명이 짧아진다.

또 배웠다.

밸런스 붕괴도 Critical이다.

3년차, 이제는 감이다

지금은 버그 리포트를 보면 1초 만에 안다.

심각도가 뭔지.

“스킬 쿨타임 초기화 버그 - 유저가 무한으로 스킬 쓸 수 있음”

Critical. 즉시 기획자한테 알림.

“캐릭터 커스터마이징에서 특정 헤어스타일 선택 시 크래시”

Critical. 유저가 게임 시작을 못 한다.

“상점 UI에서 아이템 설명 텍스트 잘림”

Minor. 불편하지만 구매는 가능하다.

“튜토리얼 스킵 버튼 작동 안 함”

Major. 복귀 유저가 짜증 난다. 이탈률 오른다.

“필드 보스 리젠 시간 30분→3분으로 변경됨”

Critical. 서버 과부하 온다. 게임 터진다.

더 이상 기획서를 일일이 안 본다. 게임 구조가 머릿속에 있다. 이 버그가 어디에 영향을 주는지 바로 알 수 있다.

경제 시스템 버그는 무조건 올린다. 진행 차단 버그는 최우선이다. 크래시는 재현율 확인하고 판단한다. UI 버그는 대부분 낮게 매긴다.

신입이 물었다. “어떻게 그렇게 빨리 아세요?”

설명하기 어렵다.

“감이야. 많이 보면 돼.”

신입이 답답한 표정이다. 나도 알아. 그 심정. 나도 1년차 때 같은 질문 했다.

근데 진짜 답은 그거다. 경험.

심각도는 맥락이다

어제 재밌는 일이 있었다.

QA 회의에서 버그 하나가 논쟁이 됐다.

“PVP에서 특정 스킬 조합 사용 시 상대방 화면 멈춤”

누군가는 Critical이라고 했다. “PVP를 못 하잖아요.”

누군가는 Major라고 했다. “재현율이 낮아요. 특정 조합이 필요해요.”

리드가 물었다. “PVP 시즌이 언제 시작하지?”

“2주 후요.”

“Critical.”

모두가 고개 끄덕였다.

같은 버그도 타이밍에 따라 심각도가 바뀐다.

PVP 시즌 전이면 Critical. 평소면 Major.

런칭 직전이면 모든 크래시가 Critical. 런칭 후 안정기면 재현율 낮은 크래시는 Normal.

이벤트 기간이면 이벤트 관련 버그는 우선순위 1순위. 평소면 나중에 고쳐도 된다.

심각도는 절대적이지 않다. 상황에 따라 바뀐다.

이게 제일 어렵다. 기준이 고정되지 않는다.

그래서 경험이 필요하다. 프로젝트를 여러 번 겪어봐야 한다. 런칭을 여러 번 해봐야 한다.

신입은 절대 기준으로 판단한다. “이건 버그니까 Critical.”

3년차는 맥락으로 판단한다. “이건 지금 고쳐야 하니까 Critical.”

차이가 크다.

틀릴 때도 있다

물론 나도 틀린다.

지난달에 버그를 Normal로 올렸다.

“특정 NPC 상호작용 시 카메라 각도 이상함”

별거 아닌 것 같았다. 게임은 진행된다. 카메라만 조금 이상할 뿐.

런칭 후 커뮤니티에 글 올라왔다.

“이 NPC 대화하면 치마 속이 보임 ㅋㅋㅋ”

난리 났다. 캡처 돌아다니고, 기사 나오고, 페미 커뮤니티에서 난리.

긴급 패치 들어갔다.

리드가 말했다. “이거 Critical이었어. 놓쳤네.”

내 잘못이다. 카메라 버그인 줄만 알았다. 그게 어떻게 보일지 생각 못 했다.

유저 반응까지 예측해야 한다.

기술적으로 Minor여도, 유저한테 Critical이면 그게 Critical이다.

여기까지는 아직 감이 부족하다. 더 배워야 한다.

신입한테 해주는 말

오늘 신입이 물었다.

“어떻게 하면 심각도를 잘 볼 수 있어요?”

내가 한 말.

“일단 많이 틀려봐.”

처음엔 다 틀린다. Critical을 Minor로 보고, Minor를 Critical로 본다. 당연하다.

틀리면 리드가 고친다. 그때 왜 틀렸는지 물어봐라.

“왜 이게 Critical인가요?” “왜 이건 Minor인가요?”

이유를 알면 다음엔 안 틀린다.

“유저 입장에서 생각해봐.”

개발자 입장이 아니라 유저 입장.

이 버그 때문에 유저가 게임을 못 하나? 이 버그 때문에 유저가 돈을 잃나? 이 버그 때문에 유저가 화내나?

답이 “예스”면 심각도 올려라.

“런칭을 경험해봐.”

CBT, 오픈 베타, 정식 런칭. 직접 겪어봐야 안다.

런칭 전날 밤에 어떤 버그를 먼저 고치는지 봐라. 그게 Critical이다.

런칭 후 유저들이 어떤 버그에 화내는지 봐라. 그것도 Critical이다.

책에는 안 나온다. 몸으로 배워야 한다.

“3년 걸린다.”

조급해하지 마. 나도 3년 걸렸다.

1년차는 기준을 배운다. 2년차는 패턴을 본다. 3년차는 감이 생긴다.

지금은 틀려도 괜찮다. 그게 배우는 과정이다.

신입이 고개 끄덕였다. 표정이 조금 나아진 것 같다.

퇴근길 생각

오늘도 버그 리포트 30개 처리했다.

심각도 분류하고, 재현하고, 로그 확인하고.

3년 전 나는 하루에 5개도 제대로 못 했다. 지금은 30개.

빨라진 게 아니다. 눈이 생긴 거다.

‘이건 Critical’이라는 확신. ‘이건 Major’라는 판단. ‘이건 Minor’라는 여유.

이게 3년의 값어치다.

연봉은 여전히 낮다. 야근은 여전히 많다. 처우는 여전히 안 좋다.

그래도 하나는 확실하다.

나는 이제 버그를 본다.

신입이 못 보는 걸 본다. 개발자가 놓친 걸 본다. 기획자가 예상 못 한 걸 본다.

이게 내 능력이다. 3년 동안 만든.

집에 가는 지하철 안.

커뮤니티 들어가 봤다. 우리 게임 글이 있다.

“오늘 업데이트 후 버그 없네? QA 일 제대로 하나 봄”

한 줄 댓글이지만 기분 좋다.

우리가 잘 걸러내면 유저는 몰라. 그게 우리 일이다.

집 도착. 씻고 침대에 누웠다.

내일도 버그 본다. 심각도 판단한다. 틀리면 배운다.

3년차 QA. 버그를 보는 눈을 가진 사람.

그게 나다.

---

Critical은 절대적이지 않다. 타이밍과 맥락이다. 3년 걸려서 배웠다.