Kacam.net

장애 조사

CPU 打满,QPS 一点没涨

CPU 从 40% 打到 95%,QPS 一点没涨,而且昨天没有发布。

프롬프트를 복사한 뒤 한 곳을 고르세요. 답을 늘어놓는 대신 면접관이 되어 장면마다 캐묻습니다.

앱이 설치된 휴대폰이면 시스템이 바로 앱을 엽니다. 위챗 안에서는 외부 앱을 열 수 없으니 먼저 브라우저로 여세요.

「CPU 高」不等于「算得多」。第一步永远是把它拆成三份,拆完再看火焰图,看完再猜原因 —— 顺序反过来是这类问题上最常见的时间浪费。

这一份还想让你记住另一句:「没有发布」不等于「没有变更」。配置中心、开关、灰度规则、DNS、证书、上下游的策略——这些都能在一行代码都没改的情况下改变系统行为,而且多数公司的发布记录不覆盖它们。

所以问变更的时候要问全。怎么问全,你自己试试。

★★★★☆ · 약 30분 · 무엇을 보는가: user / sys / iowait 先拆开、火焰图、什么算「变更」

이 편이 단련하는 동작

원인과 결과 구분 도구를 쓸 줄 알기 변경 찾기

이 문제 해봤나

로그인하면 이 문제를 해봤다고 기록할 수 있습니다. 다음에 오면 언제 했는지 보입니다.

해본 사람들의 기록

아직 아무도 쓰지 않았습니다. 해본 뒤에 무엇이 나왔는지 적어 주세요 — 어느 장면에서 막혔는지, 나중에 바꾼 결론은 무엇인지.

로그인 후에 기록을 남길 수 있습니다.

사용법

현장(무슨 서비스인지, 증상, 언제부터, 영향 범위)을 준 다음 입을 다뭅니다. 당신이 질문하고 지표·로그·패킷을 요구하고 가설을 내면, 보이지 않는 진상대로 답합니다.

**다음에 어디를 봐야 하는지 먼저 알려주는 것은 금지되어 있습니다.** 묻지 않으면 말하지 않습니다, 당신이 십 분을 헤매도. 의도적입니다: 현실에서 옆에서 「플레임 그래프를 보지 그래」라고 말해 주는 사람은 없습니다. 장애 조사 능력이란 곧 「무엇을 물어야 할지 떠올리는」 능력입니다.

시작하는 법

  1. 하나 골라서 열고, 프롬프트를 복사합니다.
  2. 새 빈 대화에 붙여 넣습니다.
  3. 현장을 주고 멈춥니다 —— **이제 당신 차례입니다.**

도중에 언제든 외칠 수 있는 네 가지 명령

  • 给个方向 답이 아니라 방향만 (횟수에 집계됨)
  • 公布真相 진상을 밝히고 마무리
  • 换一个 다른 장애로 다시 시작
  • 复盘 바로 마무리하고 회고 카드 출력

세 가지 함정

  • 끝에 있는 진상을 먼저 읽지 마세요 —— 읽으면 이 편은 연습이 되지 않습니다.
  • 원인부터 찍지 마세요. 먼저 범위를 정합니다(얼마나 / 어느 부분 / 언제부터). 범위가 코드 문제인지 환경 문제인지를 알려 줍니다.
  • 모든 현장에 가짜 단서를 심어 두었습니다: 같은 시각의 무관한 배포, 원인이 아니라 결과인 지표, 교과서 속 용의자. 마무리 카드에서 각각에 몇 문항을 썼는지 알려 줍니다.

처음이라면 「P99가 3초」부터. 진단 사슬이 가장 깔끔합니다. 다음은 「일부 장비만」—— 여기서 배우는 한 줄이 가장 두루 쓰입니다. 「간헐적 타임아웃」은 나중에, 답이 당신 시스템 밖에 있습니다. 「리포트 불일치」는 시스템 지식이 없어도 됩니다.