사내 네트워크 다운 시 원인파악 문제

안녕하세요 선배님들!

조언 얻고자 이렇게 글을 씁니다.

최근 대략 30분 정도 사내 네트워크 사용에 문제가 발생했었습니다. 

당시에 해외 네트워크팀에서 ISP장비와 바로 붙어있는 SD-wan 장비에 핑도 안나가고 리모트도 안된다고 하여 바로 메인, 백업 ISP 쪽에 연락을 취했습니다.

문제는 해외 네트워크 팀 담당자, 메인, 백업 통신사업자 모두 문제가 없었다고 한다는 건데요..

다음에 혹시 같은 문제가 다시 일어나면 어떻게 대응해야 원인 파악, 분석이 가능할지 조언 부탁 드립니다!

파악된 내용 및 추가정보

• ■전원 문제 X (UPS 정상동작)

• ■사내 네트워크 장비 재부팅, 고장 같은 별도 문제 Log 없음

• ■메인, 백업 ISP 업체는 문제 있던 시간대에 별도 문제 없었다고 함
  
  

• ■빌딩 자체 정책상 현재 메인 ISP업체가 독점하는 구조로 백업 ISP는 메인 업체가 구축한 빌딩 코어 회선을 임대하는 방식이라 failover가 안된 것인지 메인 업체 회선에 문제 였는지 제 쪽에서는 악이 안됩니다.
  
  

• ■네트워크 모니터링 툴로 봤을 때 SD-Wan 및 Core switch 쪽에 패킷 손실은 없었으나  문제가 발생했던 시간에 Response time이 비정상적으로 치솓아 있었음 

• ■ISP 업체 의견으로는 Response time이 치솟은것은 보통 사내 장비문제라고 함

• ■재택근무 상황으로 사내 근무하고 있던 인원은 극히 소수였고 response time이 치솟을 이유가 사내환경에 없었음 (네트워크팀 확인으로는 브로드캐스트 스톰등과 같은 특수 상황도 아니었다고 합니다.)