뒤끝 DNS서버 장애 안내 (통합)
안녕하세요. 뒤끝 운영팀입니다.
11/27 오전 4시 이후 thebackend.io DNS서버 장애가 발생하였고,
전 직원이 빠른 정상화를 위해 대응중에 있습니다.
복구 완료 후 공지 안내 드릴 수 있도록 하겠습니다.
이용에 불편을 드려 죄송합니다.
11/27 12시 01분 추가 공지
상황 공유가 늦어진 점 사과드리며 현재상황 공유드립니다.
장애발생 영역이 모든 서비스의 최앞단이어서 모든 게임 서버에 장애 영향이 발생하고 있습니다.
- 현재 상황
- 외부 도메인 복구 완료
- DNS 복구 완료
- 게임 서버 => 인증 서버 통신시의 장애현상을 수정 중
11/27 12시 33분 추가 공지
금일(11/27) 오후 3시까지는 이용중이신 유료마케팅을 중지하거나 줄여주시길 부탁드리며,
복구 진행 상황에 따라 지속적으로 공지사항을 통해 안내드릴 수 있도록 하겠습니다.
11/27 15시 02분 추가 공지
장애 복구 예정시간 연장 안내
현재 원인을 찾아 대응중에 있습니다.
- 장애 복구 예정시간
- 장애 발견 시점 ~ 16:00,
(15:00)
- 장애 발견 시점 ~ 16:00,
11/27 15시 58분 추가 공지
장애 복구 예정시간 연장 안내
장애 복구가 지연되고 있는점 대단히 죄송합니다.
- 장애 복구 예정시간
- 장애 발견 시점 ~ 17:00,
(16:00)
- 장애 발견 시점 ~ 17:00,
11/27 17시 00분 추가 공지
장애 복구 예정시간 연장 안내
장애 복구가 지연되고 있는점 대단히 죄송합니다.
- 장애 복구 예정시간
- 장애 발견 시점 ~ 17:30,
(17:00)
- 장애 발견 시점 ~ 17:30,
11/27 17시 30분 추가 공지
장애 복구 예정시간 연장 안내
전 직원이 장애 복구를 위해 대응중이나
장애 복구가 지연되고 있는점 대단히 죄송합니다.
- 장애 복구 예정시간
- 장애 발견 시점 ~ 18:00,
(17:30)
- 장애 발견 시점 ~ 18:00,
11/27 18시 03분 추가 공지
장애 복구 예정시간 연장 및 상황 공유 안내
우선 서버 장애와 관련해 복구가 지연되고 있는 점 대단히 죄송합니다.
서버 장애 및 현재 복구 진행 상황과 관련해 안내드립니다.
- 뒤끝의 DNS(서버의 이름 조회하는 서버) 서버에 장애가 발생
- godaddy 외부 도메인과 aws간의 DNS 연결 문제로, DNS 서버 문제가 해결되면 모든 장애가 해결됩니다.
- DDOS, 해킹 등의 문제는 전혀 아니며, 서버 인프라와 고객 데이터는 모두 정상적으로 운영/보관되고 있습니다.
- 클라이언트쪽에서 데이터를 덮어 쓴 경우에는 유실이 발생할 수 있이며, 이 경우 뒤끝팀에서 복원 지원에 최선을 다 할 예정입니다.
- DNS 서버 장애 해결을 위해 aws의 기술지원이 필요할 수 있습니다. (case open한 상태)
- aws의 내부설정으로 해결 가능한 문제인 경우 해결까지 좀 더 시간이 필요할 수 있습니다.
- 장애 복구 예정시간
- 장애 발견시점 ~ 20:00,(18:00)
후속 상황 및 복구 예정시간 관련하여서는
공지사항을 통해 지속적으로 안내드릴 수 있도록 하겠습니다.
11/27 20시 10분 추가 공지
서버 장애 및 현재 복구 진행 상황과 관련해 안내드립니다.
- 게임서버 DNS장애 우회하여 해결
- 콘솔서버 DNS장애 우회하여 해결
- 결제서버 DNS장애 우회하여 해결중
(비정상 서버 drop, 정상화 신규서버 open 과정 진행 중)
- 20시 30분 정상화 완료 예정
-
(20시 기준) 게임에 접속 가능하나, 간헐적 장애 발생 가능
이용자분들의 접속 유도는 잠시 미뤄주실것을 부탁드립니다.
후속 상황 안내 및 최종 복구 완료시 그에 따른 안내사항은
다시금 공지사항을 통해 안내드릴 수 있도록 하겠습니다.
11/27 20시 46분
서버 장애 사과문 게시(복구 완료 안내)