[지디넷코리아]백업시장에 디듀플리케이션(데이터 중복제거) 기술의 전쟁이 본격화되고 있다. 특히 테이프백업에서 디스크백업인 VTL이 대중화되면서, 테이프의 용량을 디스크가 감당할 수 없는 상황이기 때문에 백업용량을 크게 줄여주는 중복제거 기술을 빼놓을 수 없게 됐기 때문이다.

많은 스토리기 기업들이 제시하는 중복제거 기술은 원리는 비슷하다. 많은 기업들은 매주 풀백업을 실시하고 있다. 풀백업은 모든 기업의 데이터를 보관하는 작업이기 때문에 많은 저장용량을 요구하고 있다. 기존에는 이런 풀백업에 값이 싸고 큰용량을 지닌 테이프를 이용해왔다. 하지만 테이프 백업은 백업시간과 복구시간이 오래걸리고 이를 통해 많은 인적, 시간적 자원을 소모한다는 단점을 가지고 있었다.

이를 해결하기 위해 테이프백업의 작업을 하드디스크가 대체할 수 있는 VTL기술이 등장했다. VTL의 등장은 놀라운 백업속도와 편리함을 제공해 많은 기업들의 백업환경을 테이프에서 디스크로 바꾸기 시작했지만, 문제는 감당할 수 없는 데이터 용량으로 디스크 증설에 한계가 있다는 것. 따라서 VTL적용은 단기적으로 저장하는 1차 백업에 이용하고 2차 백업을 테이프로 하는 방법을 이용했지만, 이또한 데이터 용량의 증가를 감당하기 힘들었다.

데이터 중복제거 기술의 등장
풀백업은 일주일에 한번 이뤄진다. 이런 데이터가 한번만 늘어난다면 문제가 되지 않지만 매주 새로운 백업데이터가 등장하기 때문에 시간이 지날수록 데이터용량은 기하급수로 증가하게 된다. 그렇다고 디스크 용량을 매주 늘어나는 데이터 용량에 따라 증가할 수도 없는 상황.

하지만 이에 대한 해결책은 간단했다. 문제의 실마리는, 풀백업은 1바이트의 데이터가 바뀌어도 모든 데이터를 새로 백업한다는 점이었다. 따라서 보통 매주 진행하는 풀백업의 데이터는 거의 대부분 비슷하고 일부 추가된 데이터만 있을 뿐이었다.

결국 중복된 데이터를 빼면 데이터의 증가량은 크지 않다는 것. 이런 점을 감안해 데이터의 중복된 부분을 하나로 만들고 그 위에 추가된 부분만 저장해주는 기술이 바로 중복제거 기술이다.

중복제거의 인식 부재로 도입 어려워
많은 스토리지 기업들은 중복기술을 이용하면, 데이터의 용량을 20대 1 이상 줄일 수 있다고 밝히고 있다. 하지만 데이터의 양이 증가할수록 용량을 더욱 감소시킬 수 있다.

그럼에도 불구하고 기업들은 중복제거 기술의 도입을 꺼리는 경향이 있었다. 그 이유는 안정성에 대한 우려가 적지 않게 자리잡고 있어서 이다. 기업이 데이터를 풀백업하는 이유는 혹시 모르는 최악의 상황까지 감안하기 때문이다. 하지만 중복제는 데이터의 중복된 부분을 배제하고 저장한다는 기술이기 때문에 혹시 데이터의 손실이 있지 않을까하는 우려에서 였다.

특히 아직까지 데이터중복기술의 레퍼런스가 많지 않았기 때문에 이런 우려가 있다.

이에 대해 데이터도메인의 강지훈 과장은 “사람들은 ZIP과 같은 압축기술을 중요한 데이터에서 이용하면서 압축을 풀때 데이터가 손실될 거라고 생각하는 사람은 없는데, 중복제거 기술에서 데이터손실을 우려하는 고객은 많다”면서 “어떤 면에서 보면 압축기술과 비슷한 부분이 있지만 오히려 압축 기술보다 더 안전한 기술이 중복제거 기술”이라고 설명한다.

스토리지 기업들 데이터 중복제거 기술 경쟁 본격화
해외에서 중복제거기술이 주목받으면서, 많은 스토리지 기업들이 기존의 중복제거 기술을 보유하던 기업을 인수해 백업라인을 강화하고 있다.

그동안 중복제거 기술 분야에서 선두적인 위치에 있는 데이터도메인은, 최근 아카이빙 기술에도 중복제거 기술을 적용할 수 있도록 패치를 제공하고 있다. 이 회사는 국내에 지사가 설립된후 2년밖에 되지 않았지만 초기 두 명이었던 한국지사의 인원이 올해 현재 5명에 이를 정도로 백업 분야에서 좋은 반응을 얻고 있다.

EMC는 2006년 아바마를 인수해 인수기업과 동일한 이름의 ‘아바마’를 EMC라인에서 출시하고 본격적인 중복제거 시장에 뛰어들었다. 하지만 실제 제품에서 적용되는데는 시간이 필요했다. 초기 아바마를 자체 백업 솔루션에 접목하기 위한 시간이 필요했기 때문이다. 하지만 하반기부터 판매된 아바마는 많은 기업들에서 좋은 반응을 보이고 있어, 구축된 레퍼런스가 점차 늘어나고 있다고 EMC측은 설명한다.

시만텍의 경우 몇 년 전에 DCT를 인수하면서 중복 제거 기술을 갖게 됐지만 자사의 제품으로는 ‘PureDisk’ 제품에만 적용됐었다. 하지만 작년말 시만텍은 스토리지 유나이티드 전략을 발표하면서 자사의 전반적인 백업제품군에서 중복제거 기술을 이용할 수 있도록 수정했다.

시만텍코리아 제품기술본부 강일선 상무는 "많은 기업들은 불필요한 스토리지 사용으로 낭비를 하고 있다“면서 ”중복기술을 통해 스토리지의 효율성을 높이는 기술이 스토리지 유나이티드 전략“이라고 설명했다.@