Offcanvas

경력관리 / 리더십|조직관리 / 빅데이터 | 애널리틱스 / 애플리케이션

“이 없으면 잇몸” 하둡 인력 채용 어려우면 전문 협력사로

2012.07.30 John Moore  |  CIO


디엡은 고객들이 데이터 분석가/데이터 과학자, 데이터 엔지니어, 데이터 관리 전문가 등 3가지 영역의 전문가를 찾고 있다고 전했다.

분석가들은 SAS, SPSS, R 등의 프로그래밍 언어에 대한 경험이 있어야 한다. "하둡 환경에서 수집되고 저장된 정보를 생성, 분석, 공유, 통합하는 것이 전문가들의 몫이다"라고 그는 밝혔다.

데이터 엔지니어들은 데이터 처리관련 일자리를 창출하고 데이터 분석가들이 사용하는 분산형 맵리듀스 알고리즘을 구축할 책임이 있다고 디엡은 설명했다. 마지막으로, 그는 데이터 관리 인력은 하둡을 클라우드로 구축할지 아니면 온프레미스(On-Premise) 형태로 특정 업체 및 배포판을 사용할지를 판단하고 클라스터의 규모를 산정하며, 해당 클러스터가 생산 애플리케이션의 운용이나 품질 시험 용도로 사용될 지 여부를 결정할 것이라고 말했다.
 
소규모 기술 컨설팅 기업 루넥사(Lunexa)는 하둡 영역을 추구하고 있다. 이 업체는 고객들이 하둡 플랫폼을 이용해 비즈니스 솔루션을 개발하도록 돕는데 초점을 맞추고 있다고 루넥사의 파트너 데이비드 콜은 말했다.

CIO와 IT 관리자들은 단순히 하둡 기술을 찾고 있는 것이 아니다. 콜은 그들이 또한 하둡이 어떻게 BI툴과 상호작용하는지에 관한 지식을 추구하고 있다면서 "실제적으로 모든 BI 업체가 하둡을 활용하고 있다"라고 덧붙였다.

루넥사는 8년 전 전통적인 ETL 및 DW 전문기업으로 설립됐다. 콜은 루넥사가 1년 전 자체적으로 하둡 클러스터를 설치했으며, 이와 동시에 자사의 컨설턴트를 위한 하둡 교육에 투자했다고 밝혔다.

루넥사의 하둡 사업의 많은 부분이 복잡 분석을 위한 맵리듀스 코드의 개발 또는 ETL에 집중돼 있다고 콜은 전했다. 다양한 산업 분야에서 수요가 일어나고 있지만, 상당한 데이터 규모를 자랑하는 대형 미디어 기업과 금융 서비스 기업에서 좀 더 큰 수요가 발생하고 있다고 콜은 말했다.

또한 루넥사는 하둡의 데이터 웨어하우징(Warehousing) 시스템인 하이브(Hive)를 취급하면서 하둡 관리에 있어서 컨설팅 기업이 역할을 담당할 수 있을지 가능성을 타진하고 있다. "하둡에는 다양한 측면이 존재한다"라고 콜은 설명했다.

교육은 또 다른 하둡 서비스로 배포기업들이 제공할 수 있는 것이다. 예를 들어, 호튼웍스는 하둡을 활용하고 관리하는 솔루션을 개발하는 것과 관련된 코스를 제공하고 있다. 개발자 교육에는 4일이 소요되며 관리자 코스는 2일이 소요된다.

호튼웍스의 글로벌 서비스 책임자 르네 베클로프는 하둡 전문인력의 부족을 언급했다. "지난 15년 동안 교육업계에 몸담았지만 지금까지 보아온 그 어떤 플랫폼 또는 기술보다 전문인력의 공급이 부족한 실정이다"라고 그녀는 말했다.

맵알 테크놀로지스는 관리자, 데이터 모델 개발자, 개발자를 위한 교육을 제공하고 있다. 클라우데라 또한 개발자 및 관리자 교육을 제공하고 있다.

클라우데라의 기술 솔루션 담당 부사장 오메르 트라즈만은 해당 기업이 3년 전 교육 프로그램을 시작한 이래로 1만 2,000명을 교육했다고 말했다. 해당 기업은 현재 월 1,500명의 하둡 인력을 교육하고 있다.

"교육에 대한 수요가 높고 전문인력에 대한 수요도 높다"라고 트라즈만은 전했다. "아직 하둡의 사용법을 익힌 사람의 수가 부족한 상황이다."

*John Moore는 비즈니스 테크놀로지를 구제로 20년 넘게 기고문을 쓰고 있다. ciokr@idg.co.kr

CIO Korea 뉴스레터 및 IT 트랜드 보고서 무료 구독하기
Sponsored
추천 테크라이브러리

회사명:한국IDG 제호: CIO Korea 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아01641 등록발행일자 : 2011년 05월 27일

발행인 : 박형미 편집인 : 천신응 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.