Outlook/365 12시간 넘게 장애, 댓글에서는 'Office 364' 조롱과 SLA 크레딧 공유
Summarized from the Hacker News discussion because the article couldn't be read
- 댓글에 따르면 이번 한 번의 장애로 Office 365 연간 가동률이 99.9%로 떨어지고 이번 달은 99%까지 내려가며, 12월 31일 전에 신청하면 서비스 요금 50%를 SLA 크레딧으로 돌려받을 수 있음
- 댓글에서 'Office 364'라는 말이 유행하고 있음. 1년 중 하루는 죽는다는 뜻으로, 아웃룩/365가 12시간 넘게 멈춘 상황을 빗댄 조롱임
- 한 댓글에 따르면 Azure의 PaaS 제품(Postgres Flexible Server, Static Web Apps, Easy Auth 등) 상당수가 사실상 방치 상태이고, 몇 년째 preview에 머문 기능과 갱신되지 않는 로드맵이 쌓여 있으며 이들을 만들던 엔지니어와 PM은 모두 AI 프로젝트로 옮겼음
- 이메일은 간헐적 연결을 전제로 설계돼 발신 서버가 수신 서버가 받아줄 때까지 보관하고 보통 4시간마다 재시도하며 3~7일 뒤에야 영구 실패로 처리한다는 설명이 댓글에 나옴
- 댓글에서 10월 26일 마이크로소프트가 AI 효율화를 앞세워 직원 6만 명에게 자발적 퇴직을 제안했다는 소식을 인용하며, 시니어 엔지니어 감축과 이번 장애를 연결하는 반응이 나옴
Hacker News opinions
행성에서 제일 큰 회사 중 하나가 주력 서비스를 12시간 넘게 못 고치고 있다는 게 좀 무섭다. 6시간째에도 원인을 정확히 모르는 눈치였잖아.
인력이 남아나야지. 지난달에도 대규모 감원했고, 시스템 아는 사람들은 붙잡을 돈이 없어서 다 내보냈다는 얘기도 돌던데.
그럼 사내 AI한테 시키면 될 거 아니냐는 소리도 나오는데, 그 AI 인프라도 같이 죽어서 자기가 자기를 먼저 고쳐야 하는 상황 아님?
우리도 고객사 요구로 Azure에 MVP를 올렸는데 Postgres Flexible Server니 Static Web Apps니 하는 PaaS가 사실상 방치 상태였다. 몇 년째 preview에 멈춘 기능도 있고, 그 제품 만들던 엔지니어랑 PM은 전부 AI 쪽으로 옮겼더라.
결국 SPOF를 통제 밖에 두는 게 문제라는 거지. 우리 제품은 SPOF를 피하려고 난리인데 IT는 반대로 하고 있다.
대안이 있냐? 메일이랑 파일 다 복제하려면 비용이 두 배인데 0.01% 다운타임 막자고 그걸 다들 하겠냐. 어차피 다 죽으면 내 책임도 아니고.
꼭 1:1 백업이 아니어도 된다. 우리는 휴대폰이 죽으면 유선으로 넘어가는 식으로 우회 계획만 있어도 살았음.
트위터 피드 업데이트가 다 비슷비슷하던데 LLM이 쓰는 거 아님? 완전히 고쳐질 때까지 기다리면 되는데.
장애 때 '새 소식 없다'도 포함해서 꾸준히 알려주는 건 중요하다. '조사 중'보다 뭘 하고 있는지 알려주는 게 낫지.
이번 한 번으로 Office 365 연간 가동률이 9의 3개로 떨어지고 이번 달은 2개까지 내려간다더라. 12월 31일 전에 신청하면 요금 50% 크레딧 받을 수 있으니까 챙겨라.
내 셀프호스팅 메일이 저것보다 가동률이 좋다. 이메일은 원래 끊기는 걸 전제로 만들어져서 발신 서버가 4시간마다 재시도하고 3~7일 뒤에야 실패 처리함.
시니어 엔지니어 없이 LLM으로 억 단위 시스템을 고치겠다는 발상. 앞으로 며칠씩 죽는 일 더 볼 듯.
AI가 쓴 변경이 운영에서 터지면 AI도 못 찾고 사람도 못 찾는다. AI한테 운영 접근권을 잘 안 주니까. 이건 좀 무서운 시나리오임.
10월 26일에 6만 명한테 자발적 퇴직 제안했다는 기사도 있었잖아. 사람이 아직 너무 많은 거 아님?