Offcanvas

������������

선택 아닌 필수··· ‘통합 데이터 생명주기 솔루션’이 필요한 이유 

데이터가 21세기의 원유(原油)라고 할지라도 이를 시추하는 방법을 모른다면 말짱 도루묵이다. ‘데이터 생명주기(Data Lifecycle)’에는 여러 단계가 있다. 이 때문에 시추부터 생산까지 전체 생명주기를 다룰 수 있는 방법이 필요하다.  디지털 트랜스포메이션을 경험한 거의 모든 기업이 수집된 방대한 양의 데이터를 최대한 활용하고자 고군분투한다. 실제로, 대부분의 기업에서 무려 85~95%의 데이터가 충분히 활용되지 않고 낭비되는 것으로 추정된다.  ‘데이터 생명주기’에는 여러 단계가 있다. ▲데이터 수집, ▲데이터 엔지니어링 및 데이터세트 생성, ▲추가적인 사용 및 애널리틱스를 위한 데이터 대량 저장, ▲데이터 탐색을 위한 데이터베이스 생성, ▲데이터 보안 및 규제를 준수하면서 고급 애널리틱스 또는 머신러닝을 통한 인사이트 도출이다.    많은 기업이 어려움을 겪는 부분은 비용은 합리적으로 그리고 구축 및 운영 시간은 최소한으로 유지하면서 이러한 시스템을 최적으로 통합하는 것이다. 또한 데이터로부터 실질적인 인사이트를 얻을 수 있도록 이를 유의미한 방식으로 제시하는 데 따르는 어려움도 있다.  따라서 데이터 수집부터 인사이트 도출을 위한 분석까지 데이터 생명주기를 전체적으로 관리하는 방법이 필요하다. 오픈소스의 이점은 물론이고 온프레미스, 하이브리드, 클라우드 네이티브 컴퓨팅을 활용할 수 있는 역량을 유지하면서 말이다.  이에 대한 해결책으로 한동안 데이터 웨어하우스가 스토리지 및 전송을 처리하는 데 사용됐지만 완전한 해답은 아니었다. 또 많은 기업이 순수 오픈소스(예: 아파치 하둡) 또는 상용 제품(예: 탈렌드, 인포메티카, 아마존 레드시프트, IBM, SAP, 오라클 등)을 통해 데이터 클라우드를 구축하기도 했지만 이 역시 전체 데이터 생명주기 문제를 해결하진 못했다. 오히려 통합하기 쉽지 않은 이질적인 추가 제품을 다수 사용해야 하는 결과를 낳기도 했다.  특히 비용 측면에서...

데이터 데이터 생명주기 빅 데이터 디지털 트랜스포메이션 데이터 엔지니어링 데이터세트 데이터 보안 데이터베이스 오픈소스 아파치 하둡 탈렌드 인포메티카 아마존 레드시프트 IBM SAP 오라클 클라우데라 머신러닝 금융사기 원격진료

2020.11.27

데이터가 21세기의 원유(原油)라고 할지라도 이를 시추하는 방법을 모른다면 말짱 도루묵이다. ‘데이터 생명주기(Data Lifecycle)’에는 여러 단계가 있다. 이 때문에 시추부터 생산까지 전체 생명주기를 다룰 수 있는 방법이 필요하다.  디지털 트랜스포메이션을 경험한 거의 모든 기업이 수집된 방대한 양의 데이터를 최대한 활용하고자 고군분투한다. 실제로, 대부분의 기업에서 무려 85~95%의 데이터가 충분히 활용되지 않고 낭비되는 것으로 추정된다.  ‘데이터 생명주기’에는 여러 단계가 있다. ▲데이터 수집, ▲데이터 엔지니어링 및 데이터세트 생성, ▲추가적인 사용 및 애널리틱스를 위한 데이터 대량 저장, ▲데이터 탐색을 위한 데이터베이스 생성, ▲데이터 보안 및 규제를 준수하면서 고급 애널리틱스 또는 머신러닝을 통한 인사이트 도출이다.    많은 기업이 어려움을 겪는 부분은 비용은 합리적으로 그리고 구축 및 운영 시간은 최소한으로 유지하면서 이러한 시스템을 최적으로 통합하는 것이다. 또한 데이터로부터 실질적인 인사이트를 얻을 수 있도록 이를 유의미한 방식으로 제시하는 데 따르는 어려움도 있다.  따라서 데이터 수집부터 인사이트 도출을 위한 분석까지 데이터 생명주기를 전체적으로 관리하는 방법이 필요하다. 오픈소스의 이점은 물론이고 온프레미스, 하이브리드, 클라우드 네이티브 컴퓨팅을 활용할 수 있는 역량을 유지하면서 말이다.  이에 대한 해결책으로 한동안 데이터 웨어하우스가 스토리지 및 전송을 처리하는 데 사용됐지만 완전한 해답은 아니었다. 또 많은 기업이 순수 오픈소스(예: 아파치 하둡) 또는 상용 제품(예: 탈렌드, 인포메티카, 아마존 레드시프트, IBM, SAP, 오라클 등)을 통해 데이터 클라우드를 구축하기도 했지만 이 역시 전체 데이터 생명주기 문제를 해결하진 못했다. 오히려 통합하기 쉽지 않은 이질적인 추가 제품을 다수 사용해야 하는 결과를 낳기도 했다.  특히 비용 측면에서...

2020.11.27

기고 | '널리 인간을 이롭게...' 활용 잘 하면 훌륭한 조력자 될 AI

인간은 언제나 노동을 대신해 줄 기계를 발명해 왔다. 기계는 우리가 너무 고되고, 혹은 지나치게 지루하고 반복적이라고 느끼는 작업들을 대신해 주고 있다. 그것도 우리보다 더 빠른 속도로 말이다. 기계는 1시간에 1,000가지 부품을 만들어 내거나, 시간 당 수백 킬로미터의 거리를 날아갈 수도 있다. 그러나 지난 수천 년간 기계가 대체해 온 작업은 주로 물리적인 동작을 포함하는 것들이었다. 그런데 컴퓨터의 등장으로 이제는 정신적인 작업도 기계의 영역에 포함되게 되었다. 초기 컴퓨터들은 로켓 발사부터 세금 계산에 이르기까지 복잡하고 반복적인 계산 작업을 주로 담당했다. 최근 몇 년 동안 우리는 인공지능의 가능성과 위험에 대한 이야기를 접해 왔다. 과연 인공지능이란 무엇이고, 우리에게 득이 되는 존재일까 해가 되는 존재일까? 사실 인공지능의 정의조차도 아직 정립되지 않았다. 가장 일반적인 정의로는 ‘지금까지 인간만이 가능했던 작업을 할 수 있는 기계’다. 이 정의의 문제점은 ‘인간만이 가능한’ 작업이라는 것이 AI의 발전과 함께 변화한다는 것이다. 불과 얼마 전까지만 해도 손 글씨를 읽거나, 자동차를 만들거나, 비행기를 조종하는 일은 ‘인간만이 할 수 있는’ 영역에 있었다. 그런데 이제는 이 모든 작업을 기계가 대신할 수 있다. 또한 상당수 AI 시스템은 학습할 수 있다. 즉 인간의 개입 없이도 어떤 작업에 스스로 익숙해지고 숙련될 수 있다는 의미다. 많은 이들이 AI를 떠올릴 때 영화에서 본 안드로이드나, 전지전능한 컴퓨터의 이미지를 떠올린다. 그러나 과연 스타워즈의 C3-PO나 스타트렉의 데이타(Data) 사령관과 같이 미세하고 광범위한 인간 행위를 복제할 수 있는 ‘일반형’ AI가 탄생하게 될 것인가에 대해서는 논란의 여지가 있다. 적어도 현재 AI 시스템은 특정한 작업만을 수행할 목적으로 제작되곤 한다. 예를 들어 체스를 둘 목적으로 제작된 AI 시스...

협업 응용지능 디지털 지능 패턴 분석 MRI 노동 스타트렉 금융사기 공감 넷플릭스 스타워즈 인공지능 윤리 추천 진단 CIO 혁신 applied intelligence

2017.10.31

인간은 언제나 노동을 대신해 줄 기계를 발명해 왔다. 기계는 우리가 너무 고되고, 혹은 지나치게 지루하고 반복적이라고 느끼는 작업들을 대신해 주고 있다. 그것도 우리보다 더 빠른 속도로 말이다. 기계는 1시간에 1,000가지 부품을 만들어 내거나, 시간 당 수백 킬로미터의 거리를 날아갈 수도 있다. 그러나 지난 수천 년간 기계가 대체해 온 작업은 주로 물리적인 동작을 포함하는 것들이었다. 그런데 컴퓨터의 등장으로 이제는 정신적인 작업도 기계의 영역에 포함되게 되었다. 초기 컴퓨터들은 로켓 발사부터 세금 계산에 이르기까지 복잡하고 반복적인 계산 작업을 주로 담당했다. 최근 몇 년 동안 우리는 인공지능의 가능성과 위험에 대한 이야기를 접해 왔다. 과연 인공지능이란 무엇이고, 우리에게 득이 되는 존재일까 해가 되는 존재일까? 사실 인공지능의 정의조차도 아직 정립되지 않았다. 가장 일반적인 정의로는 ‘지금까지 인간만이 가능했던 작업을 할 수 있는 기계’다. 이 정의의 문제점은 ‘인간만이 가능한’ 작업이라는 것이 AI의 발전과 함께 변화한다는 것이다. 불과 얼마 전까지만 해도 손 글씨를 읽거나, 자동차를 만들거나, 비행기를 조종하는 일은 ‘인간만이 할 수 있는’ 영역에 있었다. 그런데 이제는 이 모든 작업을 기계가 대신할 수 있다. 또한 상당수 AI 시스템은 학습할 수 있다. 즉 인간의 개입 없이도 어떤 작업에 스스로 익숙해지고 숙련될 수 있다는 의미다. 많은 이들이 AI를 떠올릴 때 영화에서 본 안드로이드나, 전지전능한 컴퓨터의 이미지를 떠올린다. 그러나 과연 스타워즈의 C3-PO나 스타트렉의 데이타(Data) 사령관과 같이 미세하고 광범위한 인간 행위를 복제할 수 있는 ‘일반형’ AI가 탄생하게 될 것인가에 대해서는 논란의 여지가 있다. 적어도 현재 AI 시스템은 특정한 작업만을 수행할 목적으로 제작되곤 한다. 예를 들어 체스를 둘 목적으로 제작된 AI 시스...

2017.10.31

칼럼 | SNS 피로감을 느끼는 당신...

소셜 네트워크 서비스, 즉 SNS는 스마트폰을 사용하는 사람이라면 없어서는 안 되는 필수 서비스로 자리 잡았다. 세계적으로 가장 많은 사용자를 보유하고 있는 페이스북의 경우 2012년 5월 18일에 나스닥에 상장한 이후 지금까지 고속 성장을 이루어내고 있다. 주가의 경우 매년 최고치를 경신하고 있으며 올해도 역시 최고치를 경신 중이다. 이에 따라 기업의 시가총액도 아마존에 이어 세계 5위를 차지하고 있다. 국내에서는 페이스북뿐 아니라 카카오를 중심으로 한 서비스와 네이버의 밴드 서비스 등도 많은 사용자를 확보하고 있다. 이제 SNS는 거의 모든 국민이 사용하는 보편적인 서비스가 된 것이다. 그런데 SNS의 미래는 밝기만 할까? 이미 SNS의 폐단에 대해 언급한 글들을 인터넷에서 쉽게 발견할 수 있는 상황에서 긍정적인 면만 바라보기엔 SNS가 가지는 문제점이 적지 않아 보인다. 인터넷의 확산과 더불어 초창기에 등장한 블로그와 메신저 서비스가 그 기반을 이루고 있지만 SNS의 전형은 페이스북이라고 할 수 있다. 그래서 페이스북을 중심으로 SNS의 문제점과 그 영향에 대해 점검해본다. 페이스북은 초창기 가입자 중심의 소셜네크워크를 지향하는 서비스였다. 가입자들은 대부분 일반 사용자들이었으며 사용자들 간의 커뮤니케이션을 중심으로 서비스가 이루어졌다. 가입자의 수는 폭발적으로 증가하여 2008년 1억 명을 돌파한 이후 2014년 말 기준으로 약 14억 명에 이르렀으며 2017년에는 그보다 더 많은 사용자를 보유하고 있을 것으로 예상된다. 그 많은 사용자수를 기반으로 페이스북은 광고 비즈니스를 시작하였으며 기업 시가총액이 이야기해 주듯이 광고 사업은 꽤 성공적인 결과를 가져왔다. 그러나 그 여파로 페이스북 담벼락 포스팅의 많은 수가 광고로 채워지고 있다. 무료 서비스이니 광고를 보는 것에 대해 불만을 가지면 안 되는 건가? 라는 의구심을 가지게 되지만 그 광고의 내용이 부적절한 경우도 있고 짝퉁 상품 광고도 버젓이 등장한다면 그저 무료 서비스를 사용하고 ...

CIO 가짜뉴스 시가총액 피로 정철환 카카오 카카오톡 금융사기 네이버 블로그 트위터 해킹 페이스북 소셜네트워크 스마트폰 시총

2017.06.01

소셜 네트워크 서비스, 즉 SNS는 스마트폰을 사용하는 사람이라면 없어서는 안 되는 필수 서비스로 자리 잡았다. 세계적으로 가장 많은 사용자를 보유하고 있는 페이스북의 경우 2012년 5월 18일에 나스닥에 상장한 이후 지금까지 고속 성장을 이루어내고 있다. 주가의 경우 매년 최고치를 경신하고 있으며 올해도 역시 최고치를 경신 중이다. 이에 따라 기업의 시가총액도 아마존에 이어 세계 5위를 차지하고 있다. 국내에서는 페이스북뿐 아니라 카카오를 중심으로 한 서비스와 네이버의 밴드 서비스 등도 많은 사용자를 확보하고 있다. 이제 SNS는 거의 모든 국민이 사용하는 보편적인 서비스가 된 것이다. 그런데 SNS의 미래는 밝기만 할까? 이미 SNS의 폐단에 대해 언급한 글들을 인터넷에서 쉽게 발견할 수 있는 상황에서 긍정적인 면만 바라보기엔 SNS가 가지는 문제점이 적지 않아 보인다. 인터넷의 확산과 더불어 초창기에 등장한 블로그와 메신저 서비스가 그 기반을 이루고 있지만 SNS의 전형은 페이스북이라고 할 수 있다. 그래서 페이스북을 중심으로 SNS의 문제점과 그 영향에 대해 점검해본다. 페이스북은 초창기 가입자 중심의 소셜네크워크를 지향하는 서비스였다. 가입자들은 대부분 일반 사용자들이었으며 사용자들 간의 커뮤니케이션을 중심으로 서비스가 이루어졌다. 가입자의 수는 폭발적으로 증가하여 2008년 1억 명을 돌파한 이후 2014년 말 기준으로 약 14억 명에 이르렀으며 2017년에는 그보다 더 많은 사용자를 보유하고 있을 것으로 예상된다. 그 많은 사용자수를 기반으로 페이스북은 광고 비즈니스를 시작하였으며 기업 시가총액이 이야기해 주듯이 광고 사업은 꽤 성공적인 결과를 가져왔다. 그러나 그 여파로 페이스북 담벼락 포스팅의 많은 수가 광고로 채워지고 있다. 무료 서비스이니 광고를 보는 것에 대해 불만을 가지면 안 되는 건가? 라는 의구심을 가지게 되지만 그 광고의 내용이 부적절한 경우도 있고 짝퉁 상품 광고도 버젓이 등장한다면 그저 무료 서비스를 사용하고 ...

2017.06.01

“목표 공격의 절반 이상이 금융사기 유발” 체크포인트 발표

보안공격을 당한 기업들 중 65%가 금융사기를 목적으로 한 해커들에 의해 사업방해나 지적재산권, 영업 기밀과 같은 중요 정보유출 등의 피해를 겪었다고 체크포인트(www.checkpoint.com)가 발표했다. 체크포인트가 발표한 ‘사이버범죄가 기업에 미치는 영향’에 따르면, 기업들은 일주일 평균 66차례의 새로운 보안 공격을 당하며, 이 공격이 성공할 경우 10만 달러에서 30만 달러 상당의 피해가 발생한다고 밝혔다. 기업들에게 가장 큰 위험을 안겨준 주요 공격 유형은 ‘디도스 공격’이 꼽혔다. 최근 사이버범죄자들은 멀웨어, 봇, 기타 여러 유형의 첨단공격을 이용해 지속적으로 증가하고 있으며, 경제적 이득이나 기업운영 방해에서부터 데이터 탈취나 정치적 목적 등 다양한 이유로 기업들을 공격하고 있다. 공격 이유와 상관없이 멀웨어의 새로운 변형들이 매일 생겨나고 있으며, 여러 사이트와 기업을 동시에 공격한다. 이 멀웨어 변형들은 공격의 초기 성공률과 기업 전체에 위협을 퍼뜨릴 가능성을 증가시킨다. 이번 설문조사에 따르면, SQL 감염이 지난 2년간 발생한 기업공격 중 가장 심각한 유형으로 꼽히며, 응답자 중 1/3 이상이 지능형지속위협(APT), 봇넷 감염과 디도스 공격을 당했다고 밝혔다. 타깃화된 공격들에 대한 조사에서 응답자들은 사업 방해이나 지적재산권, 영업비밀과 같은 중요정보유출 등이 공격 후에 따르는 가장 큰 피해로 나타났다. ciokr@idg.co.kr

체크포인트 금융사기

2012.05.29

보안공격을 당한 기업들 중 65%가 금융사기를 목적으로 한 해커들에 의해 사업방해나 지적재산권, 영업 기밀과 같은 중요 정보유출 등의 피해를 겪었다고 체크포인트(www.checkpoint.com)가 발표했다. 체크포인트가 발표한 ‘사이버범죄가 기업에 미치는 영향’에 따르면, 기업들은 일주일 평균 66차례의 새로운 보안 공격을 당하며, 이 공격이 성공할 경우 10만 달러에서 30만 달러 상당의 피해가 발생한다고 밝혔다. 기업들에게 가장 큰 위험을 안겨준 주요 공격 유형은 ‘디도스 공격’이 꼽혔다. 최근 사이버범죄자들은 멀웨어, 봇, 기타 여러 유형의 첨단공격을 이용해 지속적으로 증가하고 있으며, 경제적 이득이나 기업운영 방해에서부터 데이터 탈취나 정치적 목적 등 다양한 이유로 기업들을 공격하고 있다. 공격 이유와 상관없이 멀웨어의 새로운 변형들이 매일 생겨나고 있으며, 여러 사이트와 기업을 동시에 공격한다. 이 멀웨어 변형들은 공격의 초기 성공률과 기업 전체에 위협을 퍼뜨릴 가능성을 증가시킨다. 이번 설문조사에 따르면, SQL 감염이 지난 2년간 발생한 기업공격 중 가장 심각한 유형으로 꼽히며, 응답자 중 1/3 이상이 지능형지속위협(APT), 봇넷 감염과 디도스 공격을 당했다고 밝혔다. 타깃화된 공격들에 대한 조사에서 응답자들은 사업 방해이나 지적재산권, 영업비밀과 같은 중요정보유출 등이 공격 후에 따르는 가장 큰 피해로 나타났다. ciokr@idg.co.kr

2012.05.29

회사명:한국IDG 제호: ITWorld 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아00743 등록일자 : 2009년 01월 19일

발행인 : 박형미 편집인 : 박재곤 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2022 International Data Group. All rights reserved.

10.5.0.5