장애 보고서 - 20220605

원인

미꾸라지에서 RTT (Round Trip Time) 정보를 제공하는 RTT 서버가 내부 DB 서버와의 통신이 hang 이 되며, 프로세스가 전반적으로 block 되는 현상이 있었습니다. 이 이슈의 경우, 근본적으로는 미꾸라지 프로그램의 이슈로 인한 것으로 보이지 않지만, 예외 상황에 대한 처리가 매끄럽지 못하여 발생된 이슈로 보입니다.

미꾸라지 중계 서버들에 대한 이용에는 문제가 없었겠지만, RTT 정보들 여러 연결 정보들이 제대로 서비스 되지 못하는 상황이 있었습니다. 불편을 드려 죄송합니다. ㅠ.ㅠ

장애 지속 시간

• 2022-06-05 12:40 AM ~ 2022-06-06 2:35 AM (PST 기준)
  • 약 1 시간 50 분동안, 미꾸라지 RTT 정보 관련 서비스들이 제대로 동작하지 않았습니다. 그 외 다른 전반적인 홈페이지 이용이나 서비스 이용에는 문제가 없었습니다.

조치 및 경과

• DB 연결시 connection / read / write timeout 을 명시적으로 세팅하도록 코드 패치를 진행하였습니다.

보상

이번 장애로 인한 사건에 대해서는 보상 정책에 따라 각 계정별 일괄 처리될 것입니다.