2019년 10월부터 유지

저널

엔지니어링 일기. 장애는 실제 타임스탬프와 함께 사후 분석이 게시되고, 하드웨어 결정은 그 결정을 뒷받침한 수치와 함께 게시되며, 정책 변경은 그 이유가 우리를 느리게 보이게 하더라도 설명과 함께 게시됩니다. 여기에는 마케팅 부서가 작성한 글이 없으며, 한 문단만 읽어도 그 사실이 분명해집니다.

여기에 포함되는 내용

어차피 우리는 이런 메모를 작성하고 있었습니다. 미러의 두 절반이 서로 다른 배송 상자에서 온 이유를 다음 엔지니어에게 설명해야 할 사람이 필요하고, 일단 그 내용을 적어두면 로그인 뒤에 숨겨둘 좋은 이유가 없습니다.

다섯 가지 범주. 통찰력으로 포장된 제품 발표는 여기에 없습니다.

여기에서는 튜토리얼을 찾을 수 없습니다. 안내는 [가이드 섹션](/guides)에, 참고 자료는 [지식 베이스](/docs)에 있으며, 이 셋을 섞으면 아무도 검색할 수 없는 블로그가 됩니다. 현재 가입 상태는 [상태 페이지](/status)에 있으며, 누군가 글을 쓰지 않아도 자동으로 업데이트됩니다.

사고

무언가 고장 나서 고객이 알아차린 경우. 10영업일 이내에 게시하며, 타임스탬프는 UTC로 표기하고, 첫 문단에 원인을 명시합니다. 원인이 우리 측일 경우, 다른 어떤 것보다 먼저 그 사실을 게시합니다.

하드웨어

구매한 것, 측정한 것, 거절한 것. 세대 전환, 드라이브 제품군, 그리고 의도적으로 한 세대 뒤처지게 유지하는 드문 항목(최신 부품이 워크로드에 도움이 되지 않기 때문).

네트워크

트랜짓, 피어링, 필터링, 주소. 다른 호스팅 업체가 모호하게 남겨두는 수치도 여기에 게시됩니다. '무제한'이 무엇을 의미하는지에 대한 설명부터 시작하여, 누군가 이메일로 문의하기 전에 알 수 있도록 합니다.

플랫폼

패널, 프로비저닝 대기열, API, 신규 사이트. 용량 메모도 여기에 포함됩니다. 특정 도시가 확장되지 않고 배급되는 이유를 설명하는 평범한 글도 포함됩니다.

정책

판매하는 것, 보관하는 것, 거부하는 것에 대한 변경. 저가 요금제 삭제는 5년이 지난 지금도 이 사이트에서 가장 많이 읽힌 게시물입니다.

장애 게시물 작성 방법

하우스 스타일은 미학적 선택이 아닙니다. 나쁜 한 주를 더 좋아 보이는 이야기로 조용히 재구성하는 것을 방지합니다. 삭제해야 할 섹션이 없으면 그 부재가 눈에 띄기 때문입니다.

항상 동일한 다섯 가지 제목, 동일한 순서.

01
요약
무엇이 고장났고, 얼마나 오래, 누구에게 영향을 미쳤는지 60단어 이내로. 다른 것을 읽지 않아도 자신에게 해당되는지 알 수 있어야 합니다.
02
타임라인
첫 증상부터 완전한 복구까지의 UTC 타임스탬프. 잘못된 위치를 찾는 데 소요된 시간도 포함됩니다. 그 시간이 문서에서 가장 흥미로운 부분인 경우가 많습니다.
03
근본 원인
범주가 아닌 메커니즘. 인적 오류는 근본 원인이 아닙니다. 2023년에 작성된 분류 규칙으로 인해 스키마 변경이 카나리아 단계를 건너뛸 수 있었다면 그것이 근본 원인이며, 담당자가 있습니다.
04
변경 사항
구체적이고, 날짜가 명시되고, 확인 가능합니다. 모든 항목은 고객이 전화로 확인을 요청할 수 있는 것이며, 실제로 두 번 요청한 적이 있습니다.
05
변경하지 않은 사항과 이유
대부분의 회사가 생략하는 섹션. 때로는 명백한 수정이 장애가 입힌 피해보다 더 큰 비용을 초래할 수 있습니다. 우리는 조용히 해결하기보다 공개적으로 토론하는 것을 선호합니다.

“여기 새벽 3시인데 상태 페이지에는 사이트가 정상이라고 나와 있습니다. 사이트는 정상이 아닙니다.”

2020년 10월 장애 중에 접수된 티켓

포스트모템은 아무도 요청하지 않았고 영향을 받은 고객이 눈치채지 못한 경우에도 게시됩니다. 그 중 두 개는 SLA가 지불을 요구하지 않았는데도 우리가 지불한 크레딧을 설명하며, 이런 것은 한 번만 기록하는 종류의 것입니다.

아카이브 읽기

16개의 게시물, 6년 반, 눈에 띄는 공백 하나.

공백은 2019년 후반부터 2020년 10월까지 이어집니다. 우리는 글을 쓰지 않고 랙에 장비를 설치하고 있었고, 마침내 게시물을 작성하게 된 사건은 암스테르담을 11분 동안 네트워크에서 분리시킨 공격이었습니다. 이는 이 업계에서 흔한 패턴입니다. 문서화 습관은 값비싼 문제가 발생한 날 시작됩니다.

오래된 게시물은 제자리에서 수정되지 않습니다. 주장이 틀렸음이 밝혀지면 원래 문장은 그대로 두고 수정 사항을 자체 날짜와 함께 덧붙입니다. 시간이 지나면서 조용히 개선되는 게시물은 읽는 사람에게 아무 가치가 없습니다.

기간	우리가 한 일	기록된 것
2019 – 2020	8주 만에 4개 사이트 구축, 팬데믹 기간 동안 6개 추가	게시물 2개. 창립 기록 1개와 사과문 1개.
2021 – 2022	저가 티어 삭제, IPv6 기본값, Zen 4 주문, 레이캬비크 오픈	게시물 4개(가장 많이 인용되는 게시물 포함).
2023 – 2024	카나리아, GPU, Zen 5, 그리고 함께 고장난 드라이브 배치	게시물 5개, 그중 하나는 환불이 포함된 사과문.
2025 – 2026	프로비저닝 재작성, 취리히 배급, API 오픈, 요하네스버그 랙 설치	게시물 5개와 포스트모템 1개 더.