SharedIT | 묻고 답하기(AMP)

대용량소스 백업 및 소스관리 어떤방식이 효율적일까요

안녕하세요 영상업계에서 일을하고있는 영상쟁이입니다.

제가 이번에 장기해외출장을가서 편집을하게됬는데 촬영소스관리때문에 머리를싸매다 인터넷을 타고타고 이곳에 도착해 혹시모를 고수분들께 도움을 청하고자 질문글을남깁니다

혹시 좋은방법을 아시는분이계시면 부디 조언부탁드립니다ㅜㅜ..

이번 촬영이 4k촬영으로 진행되고 장기인만큼 소스량이 엄청날것으로예상되는데 이 소스를갖고 약 4명이 동시에 편집작업을 진행해야하는 스케쥴입니다

그러다보니 아무래도 물리적으로 촬영소스를 백업받은 외장하드를 각 4대의컴퓨터에 돌려넣자니 용량도 용량이고 각 컴퓨터에 카피하는데도 너무 오래걸릴것같더라구요

게다가 촬영이 하루로땡치는것도아니고 계속 촬영진행될때마다 촬영소스를 계속 공급받아야하는데 이 대용량소스를 계속 4개의컴퓨터에 뿌리려면 물리적인 외장하드공세로는 일정상 힘들지않을까싶어서요..

그래서 방법이없을까 찾아보다가 한 감독님이 NAS라는 방법을 알려주셨는데 이 방법은 국내같이 인터넷이좋은곳은 쓸만하다고하시던데

아무래도 소스받고 작업하는곳이 해외다보니 네트워크속도가 좋을리는 만무하고 예산문제로 회사에서 따로 망을깔수도없는상태라 이것도 애매하겠더라구요..

다른감독님이 raid0 시스템이란 하이리스크 하이리턴방식을 알려주셔서 그걸로 빠른백업 및 카피를하는방법도 생각해봤는데 아무래도 해외촬영이라 여러비용문제때문에 파일백업의 안정성이 위험해서 이것도 어려워보였구요..

이 고민을 들어준 친구는 공유기와 Nas ,각 편집컴을 유선랜으로 연결하면 되지않겠냐며 얘기해줬는데 이론상으로는 가능해보이는데 그렇겐 안써봐서 잘은모르겠다며 애매한답을주었습니다..

대략 이런상황에서 어떻게하는게 최선의방법, 최고의 효율방식일지 계속 고민중인 상태입니다ㅠㅠ.. 

이렇게 네트워크가 안좋은 상황에서 대용량의 촬영소스를 여럿이서 효율적으로 공유할수있는 좋은방법이 있을까요?

친구가 얘기해준 이론적으로는 가능하다는 방법이 정말 가능하다면 최선일까요? 아니면 정녕 물리적으로 외장하드 돌려받으며 소스를 일일히 각 컴에 옮기는수밖에없을까요?

뭐든좋으니 조언부탁드리겠습니다 ㅠㅠ..

Tags : 태그가 없습니다.

11개의 답변이 있습니다.

Back Go
  0 추천 | 일 년 이상 전

해외라고 한다면 인터넷 속도가 지역마다 편차가 크기에 네트워크 구성보단 말씀하신 물리적 공유가 더 빠를듯 합니다. 


NAS , Cloud(드랍박스, 원드라이브 등..) 의 경우 네트워크 환경을 많이 타니깐요 

다만 한공간에서 작업한다면 다른분들이 말씀하신 NAS 를 중심으로 내부 망을 구축하는걸 추천드립니다. 


방송국 편집 환경 보면 결국은 물리적 하드 복사 혹은 대형서버 및 네트워크 구축입니다. 

큰트은 벗어 나지 않을듯 합니다. 

Genghis Khan
  0 추천 | 일 년 이상 전

대용량 파일을 저장하고 안전하게 관리하기 위해서

다른분들이 말씀하신 것처럼 NAS가 좋습니다.

가장 중요한건 용량 산정일것 같은데요

촬영기간이 어느정도이고  기간동안 데이터 용량이 추론해야 할것 같아요

10TB 이상이거나 50TB까지 고려한다면 4bay, 8bay도 추천합니다.

Raid를 어떻게 구성 하느냐에 따라 용량이 50%, 20%정도가 빠지거든요

일반적으로 Riad5를 사용하겠지만요.

마지막으로 촬영이 끝나고 해외에서 NAS를 가지고 올땐  뽁뽁이를 이중 삼중으로 꼭 포장하세요

NAS가 흔들리다 디스크가 문제가 발생 할수 있으니까요


촬영 장비 무게도 많이 나가는걸로 알고 있는데요


Simon.Park
  0 추천 | 일 년 이상 전

요즘 NAS 장비 제공하는 업체에서 4Bay, 6Bay, 8Bay 등 다양한 제품들이 많이 나오고 있습니다.

물론 장비를 가지고 다니기에 무게가 조금 나갈 수 있고,

이동하면서 사용하기에는 다소 무리가 있을 수 있지만,

이동하지 않고 특정 사무실에서 사용한다면 해당 NAS 를 가지고 가서 

해당 NAS 장비에서 공유를 해서 작업 하면 되는데,

문제는 편집을 하는데 있어서 소규모 NAS 장비에 데이터를 넣어 놓고 작업하기는

무리일꺼구요 (속도가 느려서 어려울 듯 합니다)

각자의 PC로 다운 받아서 작업하고 결과물을 다시 NAS 에 올리는 방식으로 해야 할 듯 합니다. 

늘푸른자스민
  0 추천 | 일 년 이상 전

내부 네트웍 구성해서 사용하시면 속도 문제는 해결될것 같고 4Bay NAS에 하드 4개 구매하셔서 Raid 5로 구성하시고 스냅샷 이용해서 백업하시면 될것 같습니다.

빨간신발
  0 추천 | 일 년 이상 전

4명의 작업자가 각각의 원격지가 아닌

한 공간에서 작업을 하신다면 공유기 + Nas를 추천합니다.

내부에서만 사용하므로 외부 인터넷 환경은 큰 상관이 없습니다.

1Gbps 공유기와 4bay 이상의 나스로 구성하세요.

나스에 hdd보다는 ssd를 추천하지만 용량이 커야하므로 ssd로는 원하는 용량을 맞추기 어렵거나 가격을 맞추기 어려울 수도 있습니다.

용량 높고 속도 좋은 hdd 4개 이상 설치하시고 raid5 또는 raid6 구성을 추천드려요.

쿨가이
  0 추천 | 일 년 이상 전

외장하드는 장기 보관, 백업용이 아니면 추천드리지 않습니다. (보관불편, 잦은 오류 발생)

네트워크 속도 안나오더라도 NAS나 아니면 클라우드 추천드리며.

속도가 많이 불편하면 작업시 다운로드 후 업로드하는 방법도 있습니다.

(당일 작업완료 파일, 야간에 업로드)

관련해서 제안 원하시면 솔루션 상담실 추천드립나다.

미생
  0 추천 | 일 년 이상 전

itsub 정도 되는 유튜버의 세팅을 참고하시는걸 추천드리는데 문제는 간단합니다.

내부에서 작업하는거야 회사 내에 기가비트 혹은 10Gbit 급 세팅을 하고 그에 따른 여러가지 대응을 해서 사용을 하면 여러가지 방법으로 내부 파일 전송속도는 만족이 가능합니다.

근데 지금처럼 해외 출장등을 가셔야 해서 현지에서 소스처리를 해야 하는 경우가 있다면 외부에서 내부망 가는 속도가 지금의 대한민국에서 1Gbit 자체를 만족하기가 어려운 상황인데, 해외면 더하고 금액도 만만치가 않습니다. 

아니면 장기의 기간을 고려하셔서 아예 직접 가시자마자 내부네트워크를 구성하시고 셋업하시는 방법도 있을 거로 보입니다.

https://www.youtube.com/watch?v=iNxUXbVxqT0 영상을 참고하시면 좋겠습니다.


물론 해외를 나가는데 이런저런 장비를 다 가지고 나가면 들고 출입국 하는데부터 애로사항이 꽃필수 있다는게 문제가 됩니다.


보통 이런경우엔 최선의 선택이라고 볼 수 있을만한건 무선공유기를 최대한 좋은 비싼 제품으로 구매하시고 각 컴퓨터에 연결할 무선 네트워크 카드를 Wifi6 급으로 맞추셔서 대역폭을 확보하신 뒤 한컴퓨터를 파일의 직접 저장위치로 (외장SSD 연결 등..) 하시고 나눠 쓰시는게 그나마 최선의 수단으로 보입니다. 문제는 4K급 소스의 초당 저장량이...

미생 | 일 년 이상 전

백업에 대한 문제는 해외의 망 속도와 소스의 파일크기를 고려할때는 그냥 4TB급 2.5" 외장하드 저렴한 모델 정도 몇개 챙겨가셔서 꾸준하게 별도 백업 받으시는게 제일 나으실겁니다. 현실적으로 그렇습니다... ㅠㅠ

topkslee
  0 추천 | 일 년 이상 전

내용이 길지만 핵심은 외부출장시에 4명이 대용량 촬용편집을 할 수 있는 환경을

만드시고 싶으신것 같은데요.

일반 문서의 경우는 클라우드에 올려서 사용하시면 제일 안전하고

장소, 환경 구애 받지 않고 가능하겠지만 영상촬영 파일은 대용량 파일일것 같은데요.

클라우드는 성능이 나오지 않을것 같아서 힘들것 같습니다.

현재의 상황이라면 말씀하신 것처럼

NAS - 공유기 - 편집PC들 연결하는 내부 LAN 환경 구성하시면 네트워크 속도, 안정성

다 지원되고, 휴대성도 좋아 이동도 자유로울것 같습니다.

위 환경으로 작업하시려고 편집용 PC들은 같은 공유기에 연결되어야 하구요. 

NAS 분실, 파손 등을 고려하신다면 백업용 NAS까지 추가로 구축하시면

큰 비용 들이지 않고 가능할 것 같습니다.

차니
  0 추천 | 일 년 이상 전

4K라면 ㅠㅠ  보통 현장이 아닌 복귀 후 편집하는데 현장 편집이라 더 어렵겠네요.

SSD NAS 2대(1대는 백업용, 1대는 편집 임시 저장용 등) - 1G지원 스위치(8포트 소형이나 유무선공유기)-각 PC  이렇게 연결하는게 최선일 듯 합니다.


해외 출장지가 어디인지 모르겠지만 국내처럼 인터넷(클라우드) 이용 속도 안나올 겁니다 ㅠㅠ


wansoo
  0 추천 | 일 년 이상 전

대용량 영상 파일이 4명이 공유해서 편집하고, 백업을 받는다는게...


쉽지 않은 내용인것 같아 보이네요.


파일단위로 4명이 다른 저장 공간에 복사해서 공유한다는 것도...


영상 편집으로 파일이 변경될때마다 고용량 영상 파일이 4명에게 복사되어야 하기 때문에 엄청난 트래픽이 발생하게 될 것 같고...


가급적 영상을 최소 단위로 분리해서 다루는게 좋지 않을까 하는 생각이 들고요.


영상을 4곳의 다른 저장 장치에 담아 공유하는 방식보다는... 성능 좋은 스펙을 갖춘 저장 장치에 담아 두고, 저장되어 있는 저장 공간 자체를 4명이 공유하는 방법이 좋겠고요.


큰 용량의 영상 파일이 4명이 함께 접근해서 동시 편집은 파일 정합성, 파일 Lock 문제로 어렵겠고...


한사람이 편집 작업을 완료하고 파일을 닫은 후에 또 다른 사람이 파일을 열어서 편집하는 방식으로 공유해야 하겠고요.


고용량의 한개 영상 파일을 여러 사람이 동시 편집은 어렵기 때문에 가급적 여러개로 파일을 분리해서 관리하는것이 서로 다른 파일을 각각이 편집한 후에 최종적으로 각각의 파일을 모아서 큰 한개의 영상으로 생성하면서 작업을 마무리하는 방식이 권장되겠고...


저장 공간을 여러명이 공유할때 흔히 사용하는 방법이 NAS 저장 장치가 되겠는데...


NAS는 윈도의 공유 폴더와 같은 개념이라고 생각하면 되겠습니다.


성능 좋은 컴퓨터에 SSD 등의 빠른 디스크를 장착해서 영상 파일을 저장하는 폴더를 생성해서 여러명이 그 폴더를 네트워크로 공유해서 사용한다면 NAS로 폴더를 공유하는 것과 유사하다고 보면 되겠고...


고용량의 영상 파일을 함께 공유하는 방식이기 때문에 공유하는 기기들 간의 네트워크 성능 또한 중요하고요.


인터넷으로 여러사람이 영상 파일을 공유해서 편집한다면 쉽지 않은 작업이 되겠지만...


근거리 로컬 네트워크라면 공유하는 기기들간에 적어도 1G 또는 작업 특성에 따라서 10G, 40G 등의 LAN을 구성해서 사용한다면 영상 전송 지연 문제를 어느 정도 해결할 수 있을 걸로 보여지고요.


 


그리고, 백업 문제는...


고용량 파일을 백업 받을 때 파일 단위로 받는 것은 비효율적일 수 있기 때문에...


가급적 디스크에 저장되는 블록단위로 백업 받는 방식을 사용하는게 좋을 걸로 보여지네요.


파일 단위로 백업 받을 경우에 파일의 일부만 변경되어도 파일 전체를 다시 전송해서 백업 받아야 하기 때문에 불필요한 정보를 반복적으로 백업받기 위해 전송해야하는 비효율적인 면이 있기 때문에, 디스크에 저장되는 블록 단위로 변경된 블록 정보만 전송해서 원격 백업 저장 장치에 동기화 백업하는 방식이 좋을 것 같고요.


 


동기화 백업은 랜섬웨어나 사용자 실수 등에 의해 파일에 원치 않은 손상이 발생했을 경우에 백업도 함께 손상되어 버리는 문제가 생기게 되기 때문에, 일정 시간 간격을 두고 스냅샷을 찍어 증분 백업되게 하거나 파일 단위 백업을 다시 받게하여 시간 변화에 따른 파일 변화 이력이 남아 있게 해두는 추가 백업이 필요하겠고요.


RAID0는 스트라이핑이라 하여 여러개 디스크를 한개 큰 디스크 공간 처럼 사용하는 방식이기 때문에 백업, 복구와는 전혀 관계가 없는 방식입니다.


아마 말씀하신 내용이 RAID1을 의미하는 걸로 보여 지는데... RAID1은 한개 디스크에 저장되는 내용 그대로를 다른 디스크에 동기화되어 동일한 내용이 두개의 디스크에 저장되게 하는 미러링 방식이 되겠는데...


RAID 구성으로 동기화해서 복제본을 만들어 두는 구성은 백업이라 하기 보다는 디스크의 하드웨어 고장에 대한 복구로 엄격한 의미에서 백업이라 보기는 어려울 것 같습니다. 동기화 방식의 복제는 랜섬웨어등에 의한 논리적인 오류가 발생했을때 동기화되는 저장 공간에도 오류를 동일하게 복제해 버리기 때문에 별도의 추가적인 백업을 받아 두는 것이 안전하다고 할 수 있습니다.

낭만생선
  0 추천 | 일 년 이상 전

검증된건 아니지만 2.5인치의 미니나스가 대안이 될수 있지 않을까요?

어느정도의 용량이 필요하신가요?

대용량 SSD를 Raid5로 시놀로지 미니NAS에 구성하고

공유기를 이용하면 원하시는 환경이 가능하지 않을까 싶네요.

다만, 원본의 용량이 수백기가 수준이 아니라 수십테라 수준이라면 이도 무용지물이겠죠.