IT 트렌드 중 클라우드 컴퓨팅에 대해 주로 다뤄왔는데, 이제는 클라우드를 통해 직접 이점을 얻을 수 있는 빅데이터에 대해 이야기를 해볼까 합니다.
빅데이터에 대해서는 이미 많은 이야기가 나오고 있습니다.
빅데이터에 대한 정의부터 내려보겠습니다.
'데이터 규모가 거대하고 형식이 다양하고, 순환속도가 매우 빨라서 종전의 방식으로는 관리 및 분석이 어려운 데이터'
첫째, 규모가 크다. Volume
둘째, 다양한 형식으로 이루어져 있다. 구조적 (매출, 재고 데이터 등), 비구조적 데이터 (동영상, 메시지, 블로그, 음악, 사진, 소셜미디어, 지리데이터 등) Variety
셋째, 빠른 순환 속도 Velocity, 즉 데이터 생성 후 유통, 활용되기까지 소요되는 시간이 분, 초 이내로 단축
참조) 삼성경제연구소, 빅데이터: 산업 지각변동의 진원
많은 양의 빅데이터를 처리할 수 있는 기술의 발전으로 기존에는 의미없던 데이터에서 가치창출이 가능해짐
기존에는 처리하기 어려웠던 비정형/비구조적 데이터를 포함한 모든 형태의 데이터 분석이 가능함으로 고객의 행동방식, 시장 트렌드등에 대해 파악하는 것이 가능해짐
일반적으로 경험하고 있는 챌린지는 다음과 같습니다.
1) 늘어나는 데이터를 다루기 위한 적절한 도구 필요
2) 정형, 비정형 데이터 모두를 분석할 필요가 생김. 약 85% 이상의 데이터는 비정형데이터
3) 실시간 데이터 분석 필요. 트위터, 페이스북, 싸이월드 등의 데이터를 실시간으로 분석
4) 간단한 배포 및 관리가 가능해야 함
다음 글에서는 위와 같은 빅데이터 분석이 가능한 솔루션에 대해 언급해보도록 하겠습니다.