김진철의 How-to-Big Data | 빅데이터 조직과 시스템 (10)
-
2019.07.23
데이터 과학팀 리더의 리더십 (5) – 머리와 가슴을 조화시켜라 (집중할 수 있는 환경 만들기) 지난 스물아홉번째, 서른번째 글에서 데이터 과학팀을 이끄는 리더가 자주 범하는 실수인 리더 자신이 걸림돌이 되는 리더십의 문제점, 팀의 문제 해결 역량과 ...
김진철의 How-to-Big Data | 빅데이터 주요 기술의 조건 (2)
-
2018.04.24
지난 칼럼에 이어 이번에는 빅데이터 주요 기술 조건 가운데 빅데이터 분석 플랫폼의 요건에 대해 알아보자. LHC 실험의 공식 데이터 분석 플랫폼 - ROOT LHC 실험을 비롯한 과학실험은 항상 데이터 분석 과정이 필수다. 특히, 실험을 ...
'임금 인상 주춤하지만 대체로 만족' 美 IT연봉 현황
-
2018.04.02
첫 직장을 찾든 이직을 고려하든 IT분야에서 구직 활동 중이라면 IT급여는 아마도 중요한 관심사 중 하나일 것이다. 미국의 취업정보 회사인 다이스(Dice)는 2018년 기술 연봉 보고서에서 정보 기술 연봉 데이터를 모든 방법으로 분리했다. ...
김진철의 How-to-Big Data | 빅데이터와 클라우드 기술 (5)
-
2018.01.29
CMS 검출기에 영혼을 주는 CMS 온라인 소프트웨어 지난 열두번째 글에서 소개한 Level-1 트리거는 CMS를 비롯한 LHC 검출기에서 원시 데이터 처리를 위해 데이터 스트림이 가장 먼저 만나는 시스템이다. 초당 1TB 이상 검출기 센서에서 쏟...
'머신러닝 활용을 더 쉽게' 오픈소스 툴 11선
-
2017.10.11
스팸 필터링, 안면 인식, 추천 엔진 등, 방대한 분량의 데이터 셋을 상대로 예측 분석이나 패턴 인식을 하고자 한다면 머신러닝만한 방법이 없다. 무료 오픈소스 소프트웨어가 많아지면서 단일 기기 및 여러 대의 기기에, 널리 쓰이는 프로그래밍 언어로 확장...
김진철의 How-to-Big Data | 빅데이터와 클라우드 기술 (1)
-
2017.09.25
클라우드 컴퓨팅의 서막 – CERN은 왜 클라우드 컴퓨팅이 필요했나? LHC 실험과 인공지능 기술에 대한 내용을 더 다루기 전에, 독자들의 이해를 더 쉽게 돕기 위해 클라우드 컴퓨팅과 LHC 실험과의 관계를 살펴보고 지나가려 한다. 오늘은...
美 스토리지 전문가 연봉은?
-
2017.06.05
기업 내 스토리지 용량 수요가 늘어나고 비즈니스 요구 사항이 진화하면서 숙련된 스토리지 전문가 수요가 증가하고 있다. 특히 기업은 하드웨어 기반 스토리지에서 클라우드 스토리지로 이전해본 경험이 있는 사람을 찾고 있으며, 그 결과 이들의 급여도 올라가는...
기고 | DIY vs. 완전 통합형 하둡, 어느 쪽이 최적의 선택일까?
-
2016.12.26
* 본 기고문은 벤더가 작성한 것으로 네트워크 월드 편집진의 수정을 거쳤지만 일부 벤더의 시각이 남아 있을 수 있다. 빅데이터 기술은 이미 기업 환경에 다양한 변화를 가져왔다. 기업들은 기존 거래 기록에서 소셜 미디어 등 다른 소스들까지, 다양한...
블로그 | 2017년에 버려질 빅데이터 도구 7가지
-
2016.10.20
빅데이터라는 모험이 시작된 지 꽤 됐다. 그러다 보니, 이제 더 이상 새롭지 않은 것들도 있다. 더 나아가 방해가 될 수도 있는 기술도 있다. Image Credit: Getty Images Bank 향후 수년 동안 기술들의 ...
하둡과 아파치 스파크, 무엇이 어떻게 다른가? 5가지 궁금증
-
2015.12.15
종종 하둡과 아파치 스파크가 빅데이터 영역에서 경쟁관계 있는 것처럼 보이기도 했지만 최근 들어 이 둘이 서로 조화를 이룬다는 생각이 점점 더 확산되고 있다. 하둡과 아파치 스파크 둘 다 빅데이터 프레임워크다. 이미지 출처 : IDGNS ...
컴스코어 CTO가 전하는 빅데이터 교훈
-
2015.07.01
이미지 출처 : Thinkstock 컴스코어(comScore)는 빅데이터 분야에서 신출내기 회사는 아니다. 이 디지털 분석 회사는 1999년 온라인에서 무슨 일이 일어나는지에 대해 인텔리전스를 제공하려는 목표를 가지고 설립됐다. 초...
빅데이터 분석에 스파크를 이용해야 하는 5가지 이유
-
2015.03.20
아파치 스파크(Apache Spark)는 하둡 기반의 고급 실시간 분석이 용이하도록 도와주면서 빅데이터의 차세대 '빅씽(Big Thing)'으로 가장 빨리 자리를 굳히고 있다. 지난 몇 년간 하둡이 빅데이터 처리의 가장 지배적인 패...
추천! 최고의 오픈소스 빅 데이터 툴 20선
-
2014.10.02
하둡은 그 어느 때보다 더 많은 인기를 누리고 있지만, 맵리듀스에 대한 수요는 감소하는 것으로 보인다. 누구나 더 빠른 대답을 원한다. SQL 쿼리의 대답 역시 이런 경우가 많다. 올해 최고 오픈소스 소프트웨어 시상인 보시(Bossies)의 빅 데이터...
맵알의 새로운 하둡 배포판으로 안전하게 업그레이드
-
2014.02.19
맵알의 최신 하둡 배포판에는 YARNN과 함께 하둡 2.2 지원 기능이 들어 있다. 게다가 최신 하둡 아키텍처로 안전하게 업그레이드하면서 맵리듀스 1.x 스케줄러와도 호환된다. 맵알 테크놀로지(MapR Technologies)가 자사의...
고액 연봉 美 IT종사자 10명 중 9명은 '빅 데이터' 전문가
-
2014.02.10
미국에서 빅 데이터 언어, 데이터베이스, 기술을 마스터한 IT전문가의 연봉이 가장 높은 것으로 조사됐다. 지난해 IT전문가들의 급여가 약 3% 상승한 가운데 빅 데이터 관련 언어, 데이터베이스, 기술에 대한 전문성을 갖춘 IT전문가들이 가장 연...