Outlook/365 12시간 넘게 장애, 댓글에서는 'Office 364' 조롱과 SLA 크레딧 공유

행성에서 제일 큰 회사 중 하나가 주력 서비스를 12시간 넘게 못 고치고 있다는 게 좀 무섭다. 6시간째에도 원인을 정확히 모르는 눈치였잖아.

인력이 남아나야지. 지난달에도 대규모 감원했고, 시스템 아는 사람들은 붙잡을 돈이 없어서 다 내보냈다는 얘기도 돌던데.

그럼 사내 AI한테 시키면 될 거 아니냐는 소리도 나오는데, 그 AI 인프라도 같이 죽어서 자기가 자기를 먼저 고쳐야 하는 상황 아님?

우리도 고객사 요구로 Azure에 MVP를 올렸는데 Postgres Flexible Server니 Static Web Apps니 하는 PaaS가 사실상 방치 상태였다. 몇 년째 preview에 멈춘 기능도 있고, 그 제품 만들던 엔지니어랑 PM은 전부 AI 쪽으로 옮겼더라.

결국 SPOF를 통제 밖에 두는 게 문제라는 거지. 우리 제품은 SPOF를 피하려고 난리인데 IT는 반대로 하고 있다.

대안이 있냐? 메일이랑 파일 다 복제하려면 비용이 두 배인데 0.01% 다운타임 막자고 그걸 다들 하겠냐. 어차피 다 죽으면 내 책임도 아니고.

꼭 1:1 백업이 아니어도 된다. 우리는 휴대폰이 죽으면 유선으로 넘어가는 식으로 우회 계획만 있어도 살았음.

트위터 피드 업데이트가 다 비슷비슷하던데 LLM이 쓰는 거 아님? 완전히 고쳐질 때까지 기다리면 되는데.

장애 때 '새 소식 없다'도 포함해서 꾸준히 알려주는 건 중요하다. '조사 중'보다 뭘 하고 있는지 알려주는 게 낫지.

이번 한 번으로 Office 365 연간 가동률이 9의 3개로 떨어지고 이번 달은 2개까지 내려간다더라. 12월 31일 전에 신청하면 요금 50% 크레딧 받을 수 있으니까 챙겨라.

내 셀프호스팅 메일이 저것보다 가동률이 좋다. 이메일은 원래 끊기는 걸 전제로 만들어져서 발신 서버가 4시간마다 재시도하고 3~7일 뒤에야 실패 처리함.

시니어 엔지니어 없이 LLM으로 억 단위 시스템을 고치겠다는 발상. 앞으로 며칠씩 죽는 일 더 볼 듯.

AI가 쓴 변경이 운영에서 터지면 AI도 못 찾고 사람도 못 찾는다. AI한테 운영 접근권을 잘 안 주니까. 이건 좀 무서운 시나리오임.

10월 26일에 6만 명한테 자발적 퇴직 제안했다는 기사도 있었잖아. 사람이 아직 너무 많은 거 아님?