이번 글은 필자가 지금까지 데이터 과학자로 경력을 쌓아오면서 경험했거나 듣고 읽었던 빅데이터 활용 사례들을 중심으로 빅데이터를 활용하는 과정에서 많은 조직이 흔히 저지르는 실수와 오해, 시행착오에 대해서 살펴보고, 이를 어떻게 개선할 수 있을지 같이 ... ...
빅데이터 비즈니스 트렌드의 미래로서 사이버 물리 시스템 기반의 지능형 서비스 비즈니스를 꽤 오랜 지면을 할애해서 지난 1년간 살펴보고 있다. 이번 글은 인공지능 기술과 사이버 물리 시스템 사이의 관계, 미래를 살펴보는 마지막 글로, 지난 6월 13일 ... ...
효성인포메이션시스템이 오브젝트 스토리지를 활용한 지능형 데이터 티어링 솔루션 ‘루마다 데이터 옵티마이저(Lumada Data Optimizer)를 출시, 하둡(Hadoop), 스플렁크(Splunk) 등의 대용량 데이터 운영 비용을 줄이고 실시간 데이터... ...
하둡(Hadoop) 빅데이터 분석 시장 규모가 2025년까지 13%의 연평균복합성장률을 기록하며 성장할 것이라는 분석이 나왔다. 마켓앤마켓이 발표한 ‘2025년까지 하둡 빅데이터 분석 시장(Hadoop Big Data Analytics Market -... ...
데이터 및 빅데이터 분석은 비즈니스를 성공시키는 동력이다. 기술을 올바르게 구현하는 것도 힘들지만, 빅데이터 이니셔티브를 이끌어갈 적합한 전문성을 가진 인재들로 구성된 적합한 팀을 구성하는 것은 이보다 더 힘들 수도 있다. 빅데이터 이니셔티브를 성공... ...
일본 전자상거래 대기업 라쿠텐의 미국 내 자회사인 라쿠텐 리워즈가 하드웨어 비용을 줄이고 더 쉽게 자산을 관리하기 위해 하둡 대신 새로운 시스템을 도입했다.  캘리포니아에 있는 라쿠텐 리워즈는 웹에서 제휴 마케팅 링크로 돈을 버는 쇼핑 포인... ...
아파치 스파크(Apache Spark)는 매우 큰 데이터 집합을 대상으로 빠르게 처리 작업을 수행하는 한편, 단독으로 또는 다른 분산 컴퓨팅 툴과 조율해 여러 컴퓨터로 데이터 처리 작업을 분산할 수 있는 데이터 처리 프레임워크다. 거대한 데이터 스토... ...
사이버 물리 시스템과 클라우드 컴퓨팅의 관계 지난 서른여섯 번째 글에서 빅데이터를 포함하여 최근 주요 IT 기술 트렌드로 떠오르고 있는 5G, 클라우드 컴퓨팅, 인공지능, IoT, 엣지 컴퓨팅이 발전해 나가는 공통의 지향점으로서 “사이버 물리 시스템(... ...
2019.10.25
테라데이타의 데이터 분석 플랫폼 밴티지가 2020년부터는 구글 클라우드에서 구동될 예정이다.   내년부터 구글 클라우드 플랫폼에서 테라데이타 밴티지 클라우드 분석 플랫폼을 제공하도록 구글과 테라데이타가 손잡았다.  밴티지는 퍼블... ...
2019.07.24
현재 오픈 소스 사용자의 총애를 받는 것은 단연 쿠버네티스지만 앞서 나왔던 하둡의 인기도 그에 못지않았다. 그러나 사용하기가 무척 어려웠기 때문에 결국 성장의 동력을 잃었다. 쿠버네티스는 여전히 발전 중이지만 캐피털 원의 버나드 골든의 지적처럼 “운영... ...
오픈소스 소프트웨어는 느리긴 하지만 기업 영역에 확실히 침투했고 많은 대형 IT 조직들이 리눅스, 하둡, 쿠버네티스, 텐서플로 등에 의존하는 수준까지 기술에 익숙해졌다.   2019년 4월에 공개된 레드햇의 기업 오픈소스 실태 조사에 ... ...
빅데이터는 여전히 유망하다. 그러나 클라우데라(Cloudera), 호톤웍스(Hortonworks), 맵알(MapR) 같은 하둡 회사가 휘청거리면서 다소 빛이 바랜 조짐이 나타나고 있다. 한 때 막대한 현금을 조달할 수 있는 선망 받는 데이터 회사들이었... ...
4차 산업혁명 시대에 데이터 과학 및 분석 역할은 조직이 경쟁우위를 확보하고자 데이터를 사용할 때 중추적인 역할을 한다.    데이터 전문가의 평균 급여가 호주 달러 기준 6자리 숫자로 상승했으며 광범위한 취업 시장에서 최저 임금... ...
451 리서치가 데이터 관리 전문가를 대상으로 한 조사에 따르면, 데이터양이 늘어나면서 보안이 가장 큰 골칫거리가 됐다.    기업들은 점점 더 많은 양의 데이터를 수집하고 분석해 서비스와 의사 결정을 개선하고 있다. 그러나 새로... ...
클라우데라(Cloudera)와 호튼웍스(Hortonworks)가 합병해 탄생한 새로운 회사는 클라우데라 브랜드로 활동하게 된다. 새 합병 회사는 고객들을 새로운 통합 클라우데라 데이터 플랫폼으로 이전하도록 하는 데 목표를 두고 있다. 이와 동시에 하이... ...
  1. 김진철의 How-to-Big Data | 빅데이터 괴담

  2. 2021.03.29
  3. 이번 글은 필자가 지금까지 데이터 과학자로 경력을 쌓아오면서 경험했거나 듣고 읽었던 빅데이터 활용 사례들을 중심으로 빅데이터를 활용하는 과정에서 많은 조직이 흔히 저지르는 실수와 오해, 시행착오에 대해서 살펴보고, 이를 어떻게 개선할 수 있을지 같이 ...

  4. 김진철의 How-to-Big Data | 빅데이터의 미래 (12)

  5. 2020.10.30
  6. 빅데이터 비즈니스 트렌드의 미래로서 사이버 물리 시스템 기반의 지능형 서비스 비즈니스를 꽤 오랜 지면을 할애해서 지난 1년간 살펴보고 있다. 이번 글은 인공지능 기술과 사이버 물리 시스템 사이의 관계, 미래를 살펴보는 마지막 글로, 지난 6월 13일 ...

  7. 효성인포메이션시스템, 오브젝트 스토리지 활용한 하둡 데이터 최적화 솔루션 제공

  8. 2020.10.20
  9. 효성인포메이션시스템이 오브젝트 스토리지를 활용한 지능형 데이터 티어링 솔루션 ‘루마다 데이터 옵티마이저(Lumada Data Optimizer)를 출시, 하둡(Hadoop), 스플렁크(Splunk) 등의 대용량 데이터 운영 비용을 줄이고 실시간 데이터...

  10. "하둡 시장, 2025년 235억 달러 규묘" 마켓앤마켓 보고서

  11. 2020.09.15
  12. 하둡(Hadoop) 빅데이터 분석 시장 규모가 2025년까지 13%의 연평균복합성장률을 기록하며 성장할 것이라는 분석이 나왔다. 마켓앤마켓이 발표한 ‘2025년까지 하둡 빅데이터 분석 시장(Hadoop Big Data Analytics Market -...

  13. ‘데이터 엔지니어’, ‘데이터 아키텍트’ 역량을 입증 · · · 자격증 9종 리스트업

  14. 2020.09.08
  15. 데이터 및 빅데이터 분석은 비즈니스를 성공시키는 동력이다. 기술을 올바르게 구현하는 것도 힘들지만, 빅데이터 이니셔티브를 이끌어갈 적합한 전문성을 가진 인재들로 구성된 적합한 팀을 구성하는 것은 이보다 더 힘들 수도 있다. 빅데이터 이니셔티브를 성공...

  16. 굿바이 하둡! 라쿠텐, 클라우드 기반 스노우플레이크로 전환

  17. 2020.06.25
  18. 일본 전자상거래 대기업 라쿠텐의 미국 내 자회사인 라쿠텐 리워즈가 하드웨어 비용을 줄이고 더 쉽게 자산을 관리하기 위해 하둡 대신 새로운 시스템을 도입했다.  캘리포니아에 있는 라쿠텐 리워즈는 웹에서 제휴 마케팅 링크로 돈을 버는 쇼핑 포인...

  19. '하둡을 제압한 빅데이터 플랫폼'··· 아파치 스파크란?

  20. 2020.03.23
  21. 아파치 스파크(Apache Spark)는 매우 큰 데이터 집합을 대상으로 빠르게 처리 작업을 수행하는 한편, 단독으로 또는 다른 분산 컴퓨팅 툴과 조율해 여러 컴퓨터로 데이터 처리 작업을 분산할 수 있는 데이터 처리 프레임워크다. 거대한 데이터 스토...

  22. 김진철의 How-to-Big Data | 빅데이터의 미래 (3)

  23. 2020.01.28
  24. 사이버 물리 시스템과 클라우드 컴퓨팅의 관계 지난 서른여섯 번째 글에서 빅데이터를 포함하여 최근 주요 IT 기술 트렌드로 떠오르고 있는 5G, 클라우드 컴퓨팅, 인공지능, IoT, 엣지 컴퓨팅이 발전해 나가는 공통의 지향점으로서 “사이버 물리 시스템(...

  25. 테라데이타 밴티지, 2020년부터 구글 클라우드에서 구동

  26. 2019.10.25
  27. 테라데이타의 데이터 분석 플랫폼 밴티지가 2020년부터는 구글 클라우드에서 구동될 예정이다.   내년부터 구글 클라우드 플랫폼에서 테라데이타 밴티지 클라우드 분석 플랫폼을 제공하도록 구글과 테라데이타가 손잡았다.  밴티지는 퍼블...

  28. 칼럼 | '복잡성의 지옥' 쿠버네티스도 하둡처럼 사라질까

  29. 2019.07.24
  30. 현재 오픈 소스 사용자의 총애를 받는 것은 단연 쿠버네티스지만 앞서 나왔던 하둡의 인기도 그에 못지않았다. 그러나 사용하기가 무척 어려웠기 때문에 결국 성장의 동력을 잃었다. 쿠버네티스는 여전히 발전 중이지만 캐피털 원의 버나드 골든의 지적처럼 “운영...

  31. 기업이 오픈소스를 좋아하는 10가지 이유

  32. 2019.07.09
  33. 오픈소스 소프트웨어는 느리긴 하지만 기업 영역에 확실히 침투했고 많은 대형 IT 조직들이 리눅스, 하둡, 쿠버네티스, 텐서플로 등에 의존하는 수준까지 기술에 익숙해졌다.   2019년 4월에 공개된 레드햇의 기업 오픈소스 실태 조사에 ...

  34. 칼럼 | 하둡, 위기에 직면하다

  35. 2019.06.12
  36. 빅데이터는 여전히 유망하다. 그러나 클라우데라(Cloudera), 호톤웍스(Hortonworks), 맵알(MapR) 같은 하둡 회사가 휘청거리면서 다소 빛이 바랜 조짐이 나타나고 있다. 한 때 막대한 현금을 조달할 수 있는 선망 받는 데이터 회사들이었...

  37. 데이터 전문가 수요 고공행진··· 호주서 연봉 6자릿수 돌파

  38. 2019.05.07
  39. 4차 산업혁명 시대에 데이터 과학 및 분석 역할은 조직이 경쟁우위를 확보하고자 데이터를 사용할 때 중추적인 역할을 한다.    데이터 전문가의 평균 급여가 호주 달러 기준 6자리 숫자로 상승했으며 광범위한 취업 시장에서 최저 임금...

  40. 최고의 데이터 관리 숙제는 '보안' <451 리서치>

  41. 2019.02.08
  42. 451 리서치가 데이터 관리 전문가를 대상으로 한 조사에 따르면, 데이터양이 늘어나면서 보안이 가장 큰 골칫거리가 됐다.    기업들은 점점 더 많은 양의 데이터를 수집하고 분석해 서비스와 의사 결정을 개선하고 있다. 그러나 새로...

  43. 새로운 클라우데라 CEO에게 듣는 '클라우드와 오픈소스 전략'

  44. 2019.01.15
  45. 클라우데라(Cloudera)와 호튼웍스(Hortonworks)가 합병해 탄생한 새로운 회사는 클라우데라 브랜드로 활동하게 된다. 새 합병 회사는 고객들을 새로운 통합 클라우데라 데이터 플랫폼으로 이전하도록 하는 데 목표를 두고 있다. 이와 동시에 하이...

X