Offcanvas

BI / SNS / 빅데이터 | 애널리틱스

기고 | 빅 데이터 시대, 물 만난 BI

2012.09.24 Allen Bernard  |  CIO


BI업체인 마이크로스트레티지의 기업 마케팅 담당 이사 R.K. 팔레루는 빅 데이터 때문에 2가지가 출현했다고 언급한 적이 있다. 그는 "여러 출처에서 더 다양한 데이터를 수집할 수는 있었다. 그러나 이제는 이들 데이터를 더욱 세밀하게 최적화 할 수 있게 됐다. 예를 들어, 전술적인 비즈니스 결정을 내려야 하는 순간에 아이패드나 스마트폰을 이용해 이들 데이터를 분석할 수 있게 됐다"라고 설명했다.

TTA(Time to Answer) 단축은 빅 데이터 분석의 핵심이다
부띠크 정보 관리 및 분석 컨설팅 회사인 뉴 밴티지 파트너스(New Vantage Partners)의 설립자이자 대표인 폴 바스는 이런 종류의 분석에서 가장 큰 장점 가운데 하나는 'TTA'의 단축이라고 설명했다. 예를 들어, 과거 데이터 과학자들이 공급망이나 제품 출시 일정 등 비즈니스 관련된 질문에 대답하기 위해 몇 달을 매달려야 했던 쿼리나 모델을 지금은 순식간에 그것도 대량으로 처리할 수 있다.

이의 처리에 앞서 정보를 최적화, 논리화, 관계화 해주는 빅 데이터 기술 덕분이다. 이는 첨단 분석 기술과 더불어 현장의 비즈니스 관리자들이 아주 짧은 시간에 질문을 하고, 여기에 대한 답을 찾도록 해주고 있다(물론 아직까지는 IT 담당자와 데이터 모델러들의 작업이 필요하다).

바스는 "이들은 빅 데이터를 이용해 기계 학습과 프로세스를 자동화 하고 있다"라고 설명했다. 이런 식으로 전 세계의 시장 별로 각 제품 라인마다 최대 2만 개의 데이터 모델을 생성함으로써, 18개월을 예측할 수 있다. 바스는 "아주 큰 변화다. 이런 변화가 가능한 이유는 빅 데이터 기술이 많은 모델링 업무 단계를 자동화해 실행할 수 있도록 지원하기 때문이다"라고 설명했다.

불과 얼마 전만 해도 사실상 불가능에 가까웠던 일이다. 통계 분석가들은 단 하나의 모델을 구축하기 위해 몇 주, 또는 몇 달을 허비해야 했었다. 예를 들어 100개 제품을 갖고 있다면 1,000개 모델 이상을 구축할 수 없었다. 이러다 보면 모델을 통해 추출한 정보가 오늘 날의 빅 데이터 모델을 통해 추출한 정보에 비해 정확할 수가 없다.

바스는 "빅 데이터는 빅 애널리틱스로서의 장점을 갖고 있다. 데이터 과학자들이 빅 데이터를 사랑하는 이유도 바로 여기에 있다. 이들은 데이터를 학습하는 동시에 작업을 반복하고, 정보를 발굴하는 동시에 통찰력을 얻을 수 있다"라고 말했다.

기가비트급 입출력, 생산 환경 밖에서의 비즈니스 애널리틱스 데이터는 질문을 하고 대답을 구하는 '민첩한 분석'에 더 큰 힘을 실어주고 있다.

빅 데이터 분석은 아직 황금기를 맞을 준비 안됐다
이런 기술들이 비즈니스 사용자들에게 큰 잠재력을 갖고 있는 것은 사실이다. 그러나 빅 데이터 분석이 자연스러운 언어 처리 엔진이나 시리(Siri) 같은 Q&A 인터페이스로 발전하기까지는 아직 요원한 게 사실이다. 하둡은 강력한 기능을 갖고 있다. 그러나 대용량 데이터 세트를 처리하는 툴로는 여전히 '원시적'이다.

이를 통해 발견한 통찰력이 얼마나 유용할지 꼼꼼히 생각해보기 바란다. 1억 가지의 정보를 10만 가지, 아니 단 1,000가지의 의미 있고 중요한 정보로 바꿀 수 있을까?

바스는 "제대로 분석하고 싶다면 똑똑한 애널리스트들이 여전히 필요하다"라고 강조했다. 다행히 빅 데이터는 이들 분석가들에게도 아주 강력한 툴이다.

*Allen Bernard는 오하이오 주 컬럼버스에 거주하는 기고가다. ciokr@idg.co.kr

CIO Korea 뉴스레터 및 IT 트랜드 보고서 무료 구독하기
추천 테크라이브러리

회사명:한국IDG 제호: CIO Korea 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아01641 등록발행일자 : 2011년 05월 27일

발행인 : 박형미 편집인 : 천신응 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.