코딩 기술 수요가 높아짐에 따라 개발자가 집에서나 이동 중에도 새로운 기술을 배울 수 있는 프로그래밍 앱의 가용성이 증가했다. 애플의 앱스토어에는 아이패드와 모바일 기기에서 접근할 수 있는 다양한 애플리케이션이 있으며, 그중에서도 개발자가 사용해 볼...

인메모리 빅데이터 처리 프레임워크인 아파치 스파크(Apache Spark)가 엔비디아 래피즈(RAPIDS)를 기반으로 GPU 가속화를 지원할 예정이다. 아파치 스파크가 곧 공개될 3.0 버전에서 네이티브 GPU 가속화를 지원한다. 무엇보다도 현재 스...

아파치 스파크(Apache Spark)는 매우 큰 데이터 집합을 대상으로 빠르게 처리 작업을 수행하는 한편, 단독으로 또는 다른 분산 컴퓨팅 툴과 조율해 여러 컴퓨터로 데이터 처리 작업을 분산할 수 있는 데이터 처리 프레임워크다. 거대한 데이터 스토...

451 리서치가 데이터 관리 전문가를 대상으로 한 조사에 따르면, 데이터양이 늘어나면서 보안이 가장 큰 골칫거리가 됐다.    기업들은 점점 더 많은 양의 데이터를 수집하고 분석해 서비스와 의사 결정을 개선하고 있다. 그러나 새로...

웹 서버(web servers)는 1990년 팀 버너스-리(Tim Berners-Lee)가 최초의 웹 브라우저를 탄생시켰던 프로젝트의 하나로, CERN httpd 개발에서 출발해 오랜 역사가 있다. 오늘날 몇몇 웹 서버 대기업은 비공개 소스 선택...

LCG 데이터 병렬 처리 프레임워크 - PROOF 본 연재의 여섯 번째 글에서 잠시 소개했던 LHC 이벤트 데이터를 분석 과정을 잠시 되새겨 보기로 하자. LHC 이벤트 데이터 분석 과정은 먼저 검출기의 Level-1 트리거와 고수준 트리거(hig...

아파치 소프트웨어 파운데이션이 넷빈즈 9.0 IDE 베타 버전을 공개했다. 지난해 말에 나온 자바 9에서 처음 도입된 자바 모듈 시스템(Java Module System)을 지원하는 것이 가장 큰 특징이다. 모듈은 JDK 9의 고급 기능으로 2017년...

이미 전세계 수백만 가정에서 사용되고 있는 아마존의 가상비서 알렉사가 이제 기업 시장 진출 채비를 마쳤다. 본격적으로 기업 시장에 뛰어들기 위해서는 새로운 ‘기능,’ 즉 기업 사용에 적합한 음성 명령 기능이 추가돼야 하겠...

현업이 업무에 인공지능 접목을 점점 더 많이 요구하는 가운데 대규모 데이터 세트에서 시스템을 학습하는 머신러닝은 여러 가지 이점을 제공하는 것으로 알려졌다. 이는 금융에서 사기 예방을 위한 예측 모델 구축을 의미할 수 있다. 예를 들어 소매기업은 고객...

아파치 스파크(Apache Spark)는 2009년 버클리대학교의 AMPLab에서 소소하게 시작된 이후, 발전을 거듭해 세계에서 가장 중요한 빅데이터 분산 처리 프레임워크 가운데 하나로 부상했다. Credit: Getty Images Bank...

재고관리나 창고관리는 기업이 보유한 상품의 모양과 비중을 구분하고 정량화하는 프로세스다. 기업이 어떤 상품을 얼마나 보유하고 있는지를 파악할 수 있으면 어디서 돈을 절약하고 고객에게 서비스를 높일지 수 있다. 현재 재고관리에 사용할 만한 오픈소스...

다목적 인메모리 데이터 처리 프레임워크인 아파치 스파크(Spark) 2.2 버전이 마침내 공개됐다. 이번 버전의 가장 큰 변화는 '구조화된 스트리밍(Structured Streaming)' 기능이다. 이를 이용하면 스파크의 배치 기반 데...

호스팅 형태의 스파크(Spark) 환경을 서비스하는 데이터브릭스(Databricks)가 '데이터 엔지니어링용 데이터브릭스(Databricks for Data Engineering)'를 발표했다. 데이터 엔지니어가 실제 비즈니스용 데이터 ...

한국테라데이타가 아파치 하둡(Apache Hadoop), 아파치 스파크(Apache Spark), 아파치 나이파이(Apache NiFi)와 같은 최신 오픈소스를 기반으로 하는 데이터 레이크(Data Lake) 관리 소프트웨어 플랫폼 ‘카일로...

오픈소스 생산성 소프트웨어인 아파치 오픈오피스 프로젝트 종료에 대한 논란이 확산하고 있다. 이 소프트웨어는 한때 마이크로소프트의 데스크톱 지배에 대항하는 핵심 오픈소스였다. 그러나 현재는 코드 내 주요 보안 이슈에 대응하는 데도 어려움을...