뒤끝 DNS서버 장애 안내 (통합)

뒤끝 DNS서버 장애 안내 (통합)

안녕하세요. 뒤끝 운영팀입니다.

11/27 오전 4시 이후 thebackend.io DNS서버 장애가 발생하였고,
전 직원이 빠른 정상화를 위해 대응중에 있습니다.

복구 완료 후 공지 안내 드릴 수 있도록 하겠습니다.
이용에 불편을 드려 죄송합니다.
 


11/27 12시 01분 추가 공지

상황 공유가 늦어진 점 사과드리며 현재상황 공유드립니다.
장애발생 영역이 모든 서비스의 최앞단이어서 모든 게임 서버에 장애 영향이 발생하고 있습니다.

  • 현재 상황
    • 외부 도메인 복구 완료
    • DNS 복구 완료
    • 게임 서버 => 인증 서버 통신시의 장애현상을 수정 중

11/27 12시 33분 추가 공지

금일(11/27) 오후 3시까지는 이용중이신 유료마케팅을 중지하거나 줄여주시길 부탁드리며,
복구 진행 상황에 따라 지속적으로 공지사항을 통해 안내드릴 수 있도록 하겠습니다.


11/27 15시 02분 추가 공지

장애 복구 예정시간 연장 안내
현재 원인을 찾아 대응중에 있습니다.

  • 장애 복구 예정시간
    • 장애 발견 시점 ~ 16:00, (15:00)

11/27 15시 58분 추가 공지

장애 복구 예정시간 연장 안내
장애 복구가 지연되고 있는점 대단히 죄송합니다.

  • 장애 복구 예정시간
    • 장애 발견 시점 ~ 17:00, (16:00)

11/27 17시 00분 추가 공지

장애 복구 예정시간 연장 안내
장애 복구가 지연되고 있는점 대단히 죄송합니다.

  • 장애 복구 예정시간
    • 장애 발견 시점 ~ 17:30, (17:00)

11/27 17시 30분 추가 공지

장애 복구 예정시간 연장 안내
전 직원이 장애 복구를 위해 대응중이나
장애 복구가 지연되고 있는점 대단히 죄송합니다.

  • 장애 복구 예정시간
    • 장애 발견 시점 ~ 18:00, (17:30)

11/27 18시 03분 추가 공지

장애 복구 예정시간 연장 및 상황 공유 안내
우선 서버 장애와 관련해 복구가 지연되고 있는 점 대단히 죄송합니다.
서버 장애 및 현재 복구 진행 상황과 관련해 안내드립니다.

  1. 뒤끝의 DNS(서버의 이름 조회하는 서버) 서버에 장애가 발생
  2. godaddy 외부 도메인과 aws간의 DNS 연결 문제로, DNS 서버 문제가 해결되면 모든 장애가 해결됩니다.
  3. DDOS, 해킹 등의 문제는 전혀 아니며, 서버 인프라와 고객 데이터는 모두 정상적으로 운영/보관되고 있습니다.
  4. 클라이언트쪽에서 데이터를 덮어 쓴 경우에는 유실이 발생할 수 있이며, 이 경우 뒤끝팀에서 복원 지원에 최선을 다 할 예정입니다.
  5. DNS 서버 장애 해결을 위해 aws의 기술지원이 필요할 수 있습니다. (case open한 상태)
  6. aws의 내부설정으로 해결 가능한 문제인 경우 해결까지 좀 더 시간이 필요할 수 있습니다.
  • 장애 복구 예정시간
    - 장애 발견시점 ~ 20:00, (18:00)


후속 상황 및 복구 예정시간 관련하여서는
공지사항을 통해 지속적으로 안내드릴 수 있도록 하겠습니다.


11/27 20시 10분 추가 공지

서버 장애 및 현재 복구 진행 상황과 관련해 안내드립니다.

  1. 게임서버 DNS장애 우회하여 해결
  2. 콘솔서버 DNS장애 우회하여 해결
  3. 결제서버 DNS장애 우회하여 해결중
    (비정상 서버 drop, 정상화 신규서버 open 과정 진행 중)
  • 20시 30분 정상화 완료 예정
  • (20시 기준) 게임에 접속 가능하나, 간헐적 장애 발생 가능
    이용자분들의 접속 유도는 잠시 미뤄주실것을 부탁드립니다.


후속 상황 안내 및 최종 복구 완료시 그에 따른 안내사항은
다시금 공지사항을 통해 안내드릴 수 있도록 하겠습니다.


11/27 20시 46분
서버 장애 사과문 게시(복구 완료 안내)

좋아요 2