Offcanvas

������������

김진철의 How-to-Big Data | 빅데이터 괴담

이번 글은 필자가 지금까지 데이터 과학자로 경력을 쌓아오면서 경험했거나 듣고 읽었던 빅데이터 활용 사례들을 중심으로 빅데이터를 활용하는 과정에서 많은 조직이 흔히 저지르는 실수와 오해, 시행착오에 대해서 살펴보고, 이를 어떻게 개선할 수 있을지 같이 생각해보기로 한다. 소개하는 사례들은 실제 사례들이 아니라 필자가 경험했거나 들은 사례들을 각색하여 만든 가상의 사례들이며, 필자가 전달하고자 하는 메시지를 부각하기 위해 조금 과장했음을 미리 알려 둔다. 지금까지 같이 생각해봤던 빅데이터 활용의 교훈을 되새기고 독자들의 시행착오를 줄이는 것을 돕기 위해 만들 사례들이니 사실이 아닌 것을 염두에 주고 가볍고 즐겁게 읽었으면 좋겠다.   사례 1: 데이터 호수가 너무 넓어서 ROI가 나지 않아 곤란한 A 기업의 CIO 이야기 많은 사람에게 널리 알려진 A 회사에서 빅데이터를 앞세워 승승장구한 C는 요즘 고민이 많다. 문제는 바로 그에게 회사에서 승승장구한 경력을 만들어준 데이터 레이크 시스템 때문이다. C는 2011년도 빅데이터 붐이 일기 시작할 즈음 승진을 위한 기획 아이템으로 뭘 앞세울까 고민하다가 그 당시 막 떠오르고 있던 빅데이터를 앞세워서 A 회사에 하둡 기반의 빅데이터 시스템을 구축하는 기획안을 만들어 임원의 승인을 받는 데 성공했다.  당시 NexR과 같이 오픈소스 하둡을 기반으로 빅데이터 솔루션을 상용화하는 스타트업이 막 등장하고 있었다. 이런 스타트업 중에서 괜찮은 회사 하나를 잘 골라서 같이 일하면서 키우면 자신의 승진에 많이 도움이 될 것 같았다. 운이 좋다면 자신의 직속 임원이 이 스타트업을 인수, 합병하여 사업 성과를 낼 수 있도록 하면서 그 회사의 고급 소프트웨어 엔지니어들을 자연스럽게 회사로 영입하여 자신의 세력으로 키울 수 있을 것 같았다. C는 당시 하둡 기반 빅데이터 스타트업으로서 같이 하둡 시스템 구축 사업을 수행한 D사를 잘 활용하여 예상보다 빠르게 하둡 시스템을 안정적으로 구축할 수 있었다. 이후 프...

김진철 빅데이터 데이터 과학 데이터 과학자 시행착오 데이터 레이크 하둡 스타트업 스파크 플링크 에어플로우 데이터웨어하우스 도커 서비스메시 쿠버네티스

2021.03.29

이번 글은 필자가 지금까지 데이터 과학자로 경력을 쌓아오면서 경험했거나 듣고 읽었던 빅데이터 활용 사례들을 중심으로 빅데이터를 활용하는 과정에서 많은 조직이 흔히 저지르는 실수와 오해, 시행착오에 대해서 살펴보고, 이를 어떻게 개선할 수 있을지 같이 생각해보기로 한다. 소개하는 사례들은 실제 사례들이 아니라 필자가 경험했거나 들은 사례들을 각색하여 만든 가상의 사례들이며, 필자가 전달하고자 하는 메시지를 부각하기 위해 조금 과장했음을 미리 알려 둔다. 지금까지 같이 생각해봤던 빅데이터 활용의 교훈을 되새기고 독자들의 시행착오를 줄이는 것을 돕기 위해 만들 사례들이니 사실이 아닌 것을 염두에 주고 가볍고 즐겁게 읽었으면 좋겠다.   사례 1: 데이터 호수가 너무 넓어서 ROI가 나지 않아 곤란한 A 기업의 CIO 이야기 많은 사람에게 널리 알려진 A 회사에서 빅데이터를 앞세워 승승장구한 C는 요즘 고민이 많다. 문제는 바로 그에게 회사에서 승승장구한 경력을 만들어준 데이터 레이크 시스템 때문이다. C는 2011년도 빅데이터 붐이 일기 시작할 즈음 승진을 위한 기획 아이템으로 뭘 앞세울까 고민하다가 그 당시 막 떠오르고 있던 빅데이터를 앞세워서 A 회사에 하둡 기반의 빅데이터 시스템을 구축하는 기획안을 만들어 임원의 승인을 받는 데 성공했다.  당시 NexR과 같이 오픈소스 하둡을 기반으로 빅데이터 솔루션을 상용화하는 스타트업이 막 등장하고 있었다. 이런 스타트업 중에서 괜찮은 회사 하나를 잘 골라서 같이 일하면서 키우면 자신의 승진에 많이 도움이 될 것 같았다. 운이 좋다면 자신의 직속 임원이 이 스타트업을 인수, 합병하여 사업 성과를 낼 수 있도록 하면서 그 회사의 고급 소프트웨어 엔지니어들을 자연스럽게 회사로 영입하여 자신의 세력으로 키울 수 있을 것 같았다. C는 당시 하둡 기반 빅데이터 스타트업으로서 같이 하둡 시스템 구축 사업을 수행한 D사를 잘 활용하여 예상보다 빠르게 하둡 시스템을 안정적으로 구축할 수 있었다. 이후 프...

2021.03.29

ERP 실패를 부르는 13가지 원인 '그리고 대책'

ERP시스템은 돈, 자원, 시간 측면에서 방대한 투자다. 물론 성공적인 ERP 도입을 통해 워크플로우를 간소화하고, 비용을 절감할 수 있다. 그러나 ERP를 잘못 도입하면 생산성이 저하되고 개발이 지연되는 등 막대한 비용이 초래될 수 있다.   CIO닷컴은 성공적인 ERP 도입과 잠재적인 문제를 최소화하기 위해 수십 명의 ERP 전문가(IT 책임자, 컨설턴트, ERP 개발업체)들을 대상으로 ERP와 관련해 가장 일반적인 시행착오가 무엇인지, 이를 피하거나 해결하려면 어떻게 해야 하는지를 물었다.다음은 이번 설문조사 결과 밝혀진 13가지 ERP 시행착오다.   ERP 시행착오 1 : 잘못된 계획 세이지(Sage) 미드마켓 ERP 제품 관리 부사장 에릭 카스는 "ERP 프로젝트를 성공시키려면 계획을 잘 수립하는 것이 아주 중요하다. 즉흥적으로 ERP를 도입하면 안 된다"고 강조했다.    미드마켓과 대기업을 대상으로 ERP 소프트웨어와 솔루션을 공급하는 바이(VAI) CIO 케빈 비슬리 또한 이런 의견에 동의했다. 비슬리는 "많은 기업들이 ERP 소프트웨어 평가에 앞서 충분한 계획을 수립하지 않는다. 이는 도입 과정에서 종종 혼란을 초래하곤 한다. 현재 프로세스와 이를 발전시켜 최대 이익과 효율성을 달성하려면 어떻게 해야 할지 제대로 이해를 못하는 상황을 불러올 수 있기 때문"이라고 설명했다.   기업들이 이런 문제를 해결하려면 ERP 시스템 선정에 앞서 해당 기업의 프로세스와 정책 일체를 내부 감사해야 한다.    비슬리는 "다양한 부서의 관계자들로 ERP 평가 팀을 구성할 필요가 있다"고 권장했다. 또한 내부적으로 ERP 시스템을 평가할 역량을 갖추고 있지 않다면, 해당 산업에서 ERP 솔루션을 도입한 경험이 있는 경험이 많으면서도, 특정 개발업체에 치우치지 않는 컨설...

ERP 실패 시행착오

2012.03.30

ERP시스템은 돈, 자원, 시간 측면에서 방대한 투자다. 물론 성공적인 ERP 도입을 통해 워크플로우를 간소화하고, 비용을 절감할 수 있다. 그러나 ERP를 잘못 도입하면 생산성이 저하되고 개발이 지연되는 등 막대한 비용이 초래될 수 있다.   CIO닷컴은 성공적인 ERP 도입과 잠재적인 문제를 최소화하기 위해 수십 명의 ERP 전문가(IT 책임자, 컨설턴트, ERP 개발업체)들을 대상으로 ERP와 관련해 가장 일반적인 시행착오가 무엇인지, 이를 피하거나 해결하려면 어떻게 해야 하는지를 물었다.다음은 이번 설문조사 결과 밝혀진 13가지 ERP 시행착오다.   ERP 시행착오 1 : 잘못된 계획 세이지(Sage) 미드마켓 ERP 제품 관리 부사장 에릭 카스는 "ERP 프로젝트를 성공시키려면 계획을 잘 수립하는 것이 아주 중요하다. 즉흥적으로 ERP를 도입하면 안 된다"고 강조했다.    미드마켓과 대기업을 대상으로 ERP 소프트웨어와 솔루션을 공급하는 바이(VAI) CIO 케빈 비슬리 또한 이런 의견에 동의했다. 비슬리는 "많은 기업들이 ERP 소프트웨어 평가에 앞서 충분한 계획을 수립하지 않는다. 이는 도입 과정에서 종종 혼란을 초래하곤 한다. 현재 프로세스와 이를 발전시켜 최대 이익과 효율성을 달성하려면 어떻게 해야 할지 제대로 이해를 못하는 상황을 불러올 수 있기 때문"이라고 설명했다.   기업들이 이런 문제를 해결하려면 ERP 시스템 선정에 앞서 해당 기업의 프로세스와 정책 일체를 내부 감사해야 한다.    비슬리는 "다양한 부서의 관계자들로 ERP 평가 팀을 구성할 필요가 있다"고 권장했다. 또한 내부적으로 ERP 시스템을 평가할 역량을 갖추고 있지 않다면, 해당 산업에서 ERP 솔루션을 도입한 경험이 있는 경험이 많으면서도, 특정 개발업체에 치우치지 않는 컨설...

2012.03.30

회사명:한국IDG 제호: ITWorld 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아00743 등록일자 : 2009년 01월 19일

발행인 : 박형미 편집인 : 박재곤 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2022 International Data Group. All rights reserved.

10.4.0.31