안녕하세요.
중소기업에서 데이터 분석 파트를 맡고 있는 회사원입니다.
얼마전에 IT 팀의 부장님께서 워크스테이션 구축을 해놓고 퇴사를 하셨는데 문제가 발생하여
마땅히 질문할 곳이 없어 여기에 글을 올리게 되었습니다.
환경 : 우분투 20.0.4
하드디스크 : 현재 16TB IronWolf ST16000VN001 X 6개 꼽혀있습니다.
RAM : DDR4 32G * 8개 = 256G
워크스테이션 정보 : 아래 사진
처음에는 잘 돌아가다가 한 3시간~6시간 정도 진행되었을 때 아래와 같은 오류들이 발생하고 있습니다.
오류 발생 후에 디스크에 접근이 안되는것으로 보아서는 디스크 문제인것 같은데
정확한 원인을 모르겠습니다.
또 gzip을 돌리면 처음에는 잘 돌아가다가 6시간 쯤에 gzip 명령어를 찾을 수 없다는 오류도 생깁니다.
바쁘신 와중에 글 읽어주셔서 감사합니다.
선생님들께서 알고 계신 정보나 지식들을 가르쳐 주시면 감사하겠습니다.
해당 질문의 문제를 해결, 도움이 되는 선택된 답변이 있습니다.
작성된 다른 답변도 확인해 보시기 바랍니다..
7개의 답변이 있습니다.
답변 주신분들 감사합니다.
선생님들 말씀대로 6개의 하드디스크 가운데 2개가 손상되어
문제가 발생한 것으로 확인되었습니다.
말씀하신 내용만 봤을때는
디스크에 문제가 있는 듯 합니다.
디스크 배드섹터 등이 있을 수 있으니, 체크해보신 후 교체 해보시길요.
디스크가 6개 꽂혀 있으면 RAID 구성이 되어 있을 것으로 생각 되는데,
일부 디스크 오류가 있을 경우, 특정 위치의 데이터를 못 읽는 경우가 발생할 수 있습니다.
1개 디스크 장애가 아닌 멀티 디스크 장애일 가능성도 있어 보이네요.
해당 로그를 보고 알수 없네요
/var/log/messages 파일을 확인해 보시고
해당 로그에서 grep -i (error ,fail, warning)messages
를 확인해 보세요
디스크 문제면 fdisk -l로 보면 특정 디스크가 안보일수 있구요
아니면 crontab -l 명령어로 불특정하게 cron으로
돌아가고 있는 배치 파일이 있는지 확인해 보세요
IT담당자가 퇴사를 하신경우라면, 직접 해결하시고 운영관리 하시기는 어려우실걸로 예상됩니다
관련 유지보수 지원 업체를 컨텍해서 기술지원을 받아보시길 권장드려요,
이후 여러가지 오류들이 발생될수 있기때문에 믿고 맡길 업체를 찾으시는게 중요할거 같습니다
처음에 잘 되다가 갑자기 안된다면,
디스크에 오류가 있는 것으로 보이네요.
일단, 컴퓨터를 재 부팅 시켜서 다시 확인해 볼 필요가 있을 것 같고요.
컴퓨터를 재 부팅 시켜서 사용해도 동일한 문제가 반복한다면, 디스크 점검을 하여 디스크에 발생한 문제를 해결해 주어야 하겠고요.
좀 더 정확한 오류 상황을 확인해 보기위해 OS에서 기록한 로그를 보셔야 할 것 같네요.
/var/log/dmesg 에 기록된 디스크 file system 읽기 전용 오류 관련된 내용을 찾아 봐서, 구체적으로 어떤 디스크에 문제가 있고, 오류 내용이 무엇인지를 확인해 보셔야 할 걸로 보이네요.
gzip을 갑자기 찾을 수 없다고 나온다면, linux가 설치되어 있는 시스템 디스크에 오류가 있을 가능성이 높아 보이고요.
로그만으로 봤을때는 디스크의 일부 파티션이 깨져있는 듯 합니다.
이에 데이타 백업이 일부 가능하다면 데이타 백업을 먼저 해놓고 우분투의 파일 시스템 체크를 해보시는 것이 좋을 듯 하네요.
jjh92092 | 3년 이하 전
감사합니다. 말씀하신대로 백업 후에 파일 시스템 체크 진행해보도록 하겠습니다.