마이크로소프트 365 대규모 장애, 상태 페이지마저 502로 먹통
- Microsoft 365 상태 페이지가 장애 중에 502를 반환하며 접속 불가, status.cloud.microsoft도 로드되지 않음
- Exchange Online 메일박스 접속 장애가 아메리카 지역 여러 연결 방식에서 보고됐고, Microsoft는 EX1550543 사건 번호로 조사 중임
- 원인은 트래픽 증가가 아니라 다수 서버가 예기치 않게 사용 불가가 되면서 남은 인프라로 부하가 몰린 것으로, Microsoft가 배포와 구성 변경을 전면 중단함
- HN 글은 207점, 댓글 87개를 기록했고 조직 전체가 멈췄다는 사례가 이어졌으나 Azure 핵심 서비스는 대체로 정상이라는 신고가 많음
- Downdetector에 Gmail과 AWS까지 장애로 뜨지만, MS 메일이 안 열려 사람들이 관련 없는 서비스까지 찍은 결과라는 지적이 나옴
Hacker News 의견들
우리 조직도 전부 다운됐어. 상태 페이지조차 안 열리는 게 제일 웃기네.
상태 페이지를 정작 상태를 알려야 할 인프라에 올려둔 게 이해가 안 감. 502 뜨면서 Azure Front Door가 응답 없다고 나오더라.
클라우드 쓰면 온프레미스처럼 단일 장애점은 없을 거라고 들었는데, 난 그때 책상에서 졸고 있었나 봐.
Downdetector 보면 Gmail이며 AWS까지 다 죽은 것처럼 나오는데 그건 방법론이 쓰레기라 그래. 메일 안 열리면 관련 없는 것까지 다 찍거든.
멕시코에서도 똑같이 죽었음. 근데 Azure는 아직 멀쩡해 보임.
여기는 Teams 채팅은 되는데 캘린더처럼 O365랑 붙은 건 다 죽었어. SharePoint 교육 영상은 아직 나옴.
Microsoft가 특정 유형의 서비스 트래픽이 예상치 않게 늘었다고 한 걸 보면 DDoS나 자체 코드 변경 문제일 듯. 남의 공격으로 Outlook이 죽으면 그게 더 큰 문제지.
트래픽이 늘어서가 아니라 서버가 갑자기 사라져서 부하가 몰린 거라며. AI 쪽에 데이터센터 자원 몰아준 결과 아닐까 싶음.
25% 감축한다는 회사 아니냐는 댓글에 대해선, 자발적 퇴직 제안은 받을 사람 통계로 설계하는 거라 실제 감축은 2.5~5% 수준일 거라고들 하더라.
해고하면 실업수당 부담에 WARN 신고 의무까지 생기니 자발적 매수 제안으로 피해가는 거지. 평판 관리도 있고.
LinkedIn은 멀쩡한 게 제일 웃기네.
소프트웨어 품질이 몇 년째 떨어지고 있다는 데 동의함. 다만 이건 품질 문제라기보다 복잡한 인프라가 연쇄로 무너진 쪽 같아.