GitHub 일부 서비스 성능 장애 조사, DB primary 문제와 Vitess 조사 언급

요즘 GitHub 장애가 너무 잦음. 이제 GitHub가 실제로 정상일 때 HN에 올리는 편이 더 맞을 정도임.

상태 페이지에 DB primary 문제와 replica 페일오버를 바로 적는 게 이상함. 이런 전환은 자동으로 처리돼서 사용자 공지까지 갈 일이 없어야 하는 것 아닌가.

primary 페일오버 뒤에도 성능 문제가 남았고, 유입 트래픽을 제한한 채 상위 Vitess 문제를 조사 중이라는 업데이트도 나왔음.

장애 중에는 셀프호스팅 GitHub Actions조차 실행 못 함. 의존성이 너무 깊음.

GitHub 이상 징후를 봐도 상태 페이지가 초록색이면 내가 잘못 본 건가 하게 됨. Reddit, HN, X, 사내 채팅이 상태 페이지보다 먼저 알려주는 일이 늘 그럼.

GitHub는 무료 서비스와 유료, 엔터프라이즈 서비스를 인프라 수준에서 완전히 분리해야 함. 돈 내는 고객까지 같은 장애를 겪는 건 납득하기 어려움.

지역별 상태 페이지를 보면 Enterprise Cloud Actions 가동률은 훨씬 높더라. 엔터프라이즈는 이미 어느 정도 분리된 듯함.

GitHub가 전부 단일 DB 하나에 걸렸다고 단정할 수는 없음. primary가 있다는 말은 여러 DB와 복제본 사이의 트래픽 배분 문제일 수도 있음.

지난주 장애 때 Forgejo와 커스텀 액션 러너를 구성했는데, 오늘 이관 작업을 끝내려 함. 시간 낭비가 아니었음.

장애는 날 수 있지만 너무 자주 반복되는데 다들 그냥 'GitHub니까' 하고 넘기는 분위기임. 중요한 서비스라면 사용료처럼 장애 보상도 논의해야 한다고 봄.

나는 GitHub에서 자체 서버로 옮겼음. Cloudflare Pages 배포 연동이 필요한 사이트 두 개만 아직 GitHub에 남아 있음.