CJ 대한통운

CASE STUDY

택배 시스템 및 물류 분석을 위한 빅데이터 시스템 구축

CJ 대한통운은 물류업체로 국대 최대 인프라와 첨단 물류 IT 시스템을 바탕으로 대한민국을 대표하는 세계적인 물류기업을 목표로 하고 있습니다. 최대 인프라를 보유한 만큼, 매일 생성, 처리되는 데이터 용량이 급격하게 늘어나고 있는 환경 변화에 대응하기 위해 대용량 데이터의 분석을 빠르게 수행할 뿐만 아니라, CJ 대한통운 자체 프로시저를 곧바로 적용할 수 있는 유연한 분석 시스템을 구축하였습니다.

업무 도전 과제

CJ 대한통운 물류 데이터 중, 분석을 위해 수집된 데이터에서 데이터 검색, 삭제, 추가 등의 작업을 빠른 시간 안에 달성하고, SQL 프로시저를 원활하게 수행하여 비즈니스 인사이트 도출을 위한 시스템을 구성하는 것을 목표로 하였습니다.

적용 현황

데이터 96억건의 2TB 데이터와 2,200라인 이상의 SQL 프로시저와 단일 SQL 구문이 처리하는 레코드 건수 10억건 정도되는 시스템을 빠른 시간 안에 수행하기 위해 당사의 NewSQL 데이터베이스인 MONADB를 병렬 분산 수행에 최적화된 아키텍처로 적용하였습니다. Oracle 기반의 SQL 프로시저의 별다른 수정 없이 수행할 수 있도록 시스템을 구성하였으며, 빠른 데이터 처리를 위해 12대의 서버에 48개의 Datanode를 설치하여 MONADB의 대용량 처리 MPP (Maasively Parallel Processing)를 적용하였습니다.

적용 결과

대용량 분산 아키텍처 구조의 MONADB를 적용한 결과 기존 IBM Netezza 보다 약 25% 정도 빠른 성능을 보였으며 고가의 어플라이언스 가격의 1/10 가격으로 시스템을 구성하여 뛰어난 가격대비 성능을 보여줌을 증명하였습니다.