Offcanvas

경력관리 / 빅데이터 | 애널리틱스

“빅 데이터 전문가 부족, IT업체가 나서야”••• IDC 주장

2012.04.23 Derek du Preez  |  Computerworld
IDC의 리서치 부사장 수잔 펠드만에 따르면, 기업 IT부서들이 빅 데이터 기술력 부족으로 이로 인한 이점을 얻는데 어려움을 겪고 있는 것으로 조사됐다.

지난 주 오토노미가 주관한 빅 데이터 라운드테이블에서 펠드만은 빅 데이터 기술이 매우 복잡해 IT전문가들 사이에서도 이 기술을 갖춘 고급 인력은 상당히 드물다고 설명했다.

"빅 데이터 관련 숙련된 전문가들은 많지 않다. 사람이 없는데 기업이 이들을 어떻게 고용할 수 있나?”라고 펠드만 물었다.

수 백 TB 또는 PB 규모의 비정형 데이터를 분석하기 위해 기업에서 사용하는 가장 일반적인 기술은 하둡이라는 오픈소스 도구다.

하둡은 많은 디스크 드라이브와 연결된 수백 대의 서버에서 분석할 수 있는 병렬 프로그래밍이라는 프로세스를 거의 실시간으로 사용한다 하둡은 이 데이터를 하둡 분산 파일 시스템(HDFS)이라는 파일 시스템에 저장한다. 이 파일 시스템은 데이터를 여러 개의 디스크 드라이브와 서버로 데이터를 퍼뜨린다.

그러나, 하둡은 마스터하기에는 매우 복잡한 시스템이며 개발자들의 심도있는 기술력이 필요하다는 것은 이미 업계에 알려져 있는 사실이다. 또한 효과적인 생태계와 오픈소스 제공에 대한 표준 역시 부족한 상황이다.

"주변에 하둡 전문가들이 거의 없고 하둡을 사용할 수 있는 매우 적다. 기업이 필요로 하는 것은 하둡 파일 시스템 기술을 갖춘 전문가뿐 아니라 불량 툴을 사용하는 하둡 파일 시스템도 다룰 줄 아는 전문가를 필요로 한다”라고 펠드만은 강조했다.

펠드만은 이러한 전문 인력 부족으로 인한 영향을 최소화려면 오토노미, EMC, 테라데이타, IBM 등의 IT업체들이 공급하는 툴을 개선해야 한다고 주장했다.

"IT업체들이 전문가들을 공급할 수 있고, 소프트웨어 업데이트를 계속할 수 있다면, 기업 IT부서의 부담을 줄일 수 있을 것이다”라고 그녀는 전했다.

"모든 빅 데이터 조각들을 잘 구성된 아키텍처로 통합해 모든 데이터가 상호작용할 수 있으면 좋겠지만, 이는 현실적으로 매우 어려운 일이다. 빅 데이터 분석을 위해 대부분의 사람들은 10명의 전문가를 신규로 채용하면서 만족해 할 것이다. 하지만 그 10명을 쉽게 고용할 수 있느냐가 문제다”라고 그녀는 말했다.

한편, IDC는 2010년 2015년까지 빅 데이터 관련 하드웨어, 소프트웨어 및 서비스 매출이 매년 39% 성장할 것으로 전망했다. 그러나 이 전망치에는 기업이 사용하는, 상당한 규모에 해당하는 오픈소스 부문을 포함되지 않았으며 이를 추산하기는 어렵다고 IDC는 덧붙였다. ciokr@idg.co.kr
CIO Korea 뉴스레터 및 IT 트랜드 보고서 무료 구독하기
추천 테크라이브러리

회사명:한국IDG 제호: CIO Korea 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아01641 등록발행일자 : 2011년 05월 27일

발행인 : 박형미 편집인 : 천신응 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.