Salesforce 전 세계 장애, 상태 페이지는 인스턴스 3243개만 나열하고 원인은 안 알려줘
- 인시던트 20004433에 따르면 원인은 legacy 로그인 서비스의 자원 고갈 캐스케이드이며, 테스트로 검증한 수정을 플릿에 아주 천천히 배포하는 중이고 그전의 더 빠른 배포 시도는 실패함
- Salesforce 상태 페이지는 3243개 인스턴스를 지역별로 나열할 뿐, 장애 자체를 설명하는 문구는 없고 인스턴스를 파고들어도 'Service Disruption' 표시만 나옴
- 초기 대응으로 한 인스턴스에 롤링 재시작을 시도했고, 이후 '재시작을 해결 경로로 더는 추진하지 않는다'는 문구를 공지에 남김
- 장애 시점이 Dreamforce(9월 15~17일)와 겹쳐 타이밍이 최악이라는 반응이 나옴
- 댓글 작성자들은 서비스가 다시 올라온 것으로 보인다고 전함
Hacker News opinions
상태 페이지가 진짜 salesforce스럽더라. 스크롤이 끝이 없어 ㅋㅋ
나름 잘 만든 거 아님? 인스턴스 하나 눌러서 어떤 서비스가 죽었는지, 인시던트 타임라인까지 볼 수 있는데. '가장 salesforce스러운 것'이라는 말은 좀 심한 듯
그래도 장애 내용 자체는 페이지 어디에도 안 적혀 있음. 파고들어도 'Service Disruption'이 전부야
DNS 아니야? 이게 동시에 다 죽으려면 DNS밖에 없지
DNS 아니고 IPv6라는 사람도 있고 ㅋㅋ 아무튼 항상 DNS임
인시던트 20004433 보면 원인이 legacy 로그인 서비스의 자원 고갈 캐스케이드래. 테스트로 검증한 수정을 플릿에 아주 천천히 굴리는 중이고, 더 빠른 배포 시도는 실패했대
재시작 시도했다고 솔직히 적어둔 게 의외임. 'We're no longer pursuing restarts as a path to remediation' 문장에서 빵 터짐
이번 주가 Dreamforce(9월 15~17일)라 타이밍이 최악이네
CRM 하나 죽었다고 세상이 멈춘 것도 아니고, 오늘 다들 진짜 일 했다는 농담이 제일 웃김
Salesforce랑 연동하는 작업 해본 사람은 알지. 매번 고생이고, 결국 하는 일은 마케팅과 스팸 최적화임
이제 다시 살아난 것 같은데, 아쉽다