Offcanvas

AI / CIO / 머신러닝|딥러닝 / 보안

"AI 편향이 초래할 비즈니스 위험은..." 스웨덴 CIO 3인의 진단

2023.06.13 Karin Lindstrom  |  CIO
AI가 내놓은 결과물은 편향될 수 있다. 그리고 그 심각성은 여전히 과소평가되고 있다. 기업은 AI의 편향성이 초래할 수 있는 위험성을 이해해야만 한다. 의사 결정에 과정에 AI가 점점 더 널리 사용되는 현실을 감안하면 꽤 시급한 사안이다. 
 
Image Credit : Getty Images Bank

AI는 훈련 재료인 데이터를 뛰어넘을 수 없다. 만약 데이터가 편향적으로 선택됐다면, 선택 과정에 사람의 취향이 반영됐다면, 이는 AI에 반영되어 왜곡된 결과가 나올 수 있다는 의미다.

미국 정부는 이제 편향된 AI로 인한 차별 사례를 방지하기 위해 새로운 법률을 시행하고 있다. 일례로 소비자금융보호국은 현재 대출 또는 주택 평가용 알고리즘의 편향으로 인한 주택 차별 실태를 조사하고 있다.

소비자금융보호국장 로히트 초프라는 최근 CNBC에 “미국의 시민 평등권 법은 불법적인 차별에 관여하는 새로운 기술과 인공지능에 대해 예외 없이 적용된다”라고 말했다.

스웨덴 소프트웨어 공급업체 프로그레스(Progress)에서 의뢰한 국제 설문조사에 따르면, 기업 CIO와 기타 고위 관리자들도 이 문제를 인식하고 있다. 이 설문조사에서 스웨덴 관리자 중 56%는 현재 소속 기업에 차별적인 데이터가 분명히 또는 아마도 있다고 밝혔으며, 62%는 AI 및 ML의 사용이 확대됨에 따라 차별적인 데이터가 비즈니스에 더 큰 문제가 될 가능성이 높다고 보고 있었다.

스웨덴 에너지 대기업 엘레비오(Ellevio) CIO 엘리사베트 슈테른스토프는 관찰 중인 고객 집단이나 인구를 대표하지 않는 편향된 데이터를 사용하는 위험이 있다고 지적했다.

그녀는 “(편향 데이터의) 위험은 당연히 AI의 정확한 예측 능력에 영향을 미칠 수 있다. 모델이 학습한 데이터뿐만 아니라 알고리즘의 설계 방식과 기능의 선택도 살펴봐야 한다. 요컨대, 위험은 존재하므로 우리는 모델을 감시하고 필요하면 수정해야 한다”라고 강조했다.

그러나 그녀는 엘레비오가 현재 사용하는 AI 솔루션에 대해서는 걱정하지 않는다. 슈테른스토프는 “우리 회사에서 AI는 더 빠르고 효율적인 코드 작성에 주로 사용된다. 편향된 AI의 위험에 대해 걱정하지 않는다. 코드가 개발된 후에는 검토도 거친다. 머신러닝은 기술적인 영역에서 예측 분석을 위해 주로 사용된다”라고 말했다.

그러면서도 그녀는 추위가 극심할 때의 에너지 부하를 예측하기 위해 관련 학습 데이터를 입수할 때 문제에 부딪힌 바 있다고 전했다. 그녀는 “그런 추위가 닥치는 상황은 매우 드물어서 학습할 것이 많지 않다는 점이 어렵다”라고 전했다.

편향된 AI의 위험이 초래할 결과 고려
스웨덴 금속회사 볼리덴(Boliden) CIO 고란 커르델은 편향된 AI로 인한 위험을 이해하는 것이 필수적이라는 데 동의했다.

그는 “아마도 모든 CIO가 현재 고민하는 주제일 것이다. AI가 몇 년 내에 어떤 모습이 되고 어떻게 사용될 지 모른다 해도 편향된 AI의 위험에 대해 고민하는 것은 중요하다고 생각한다. 편향된 AI의 위험이 초래할 결과에 대해 생각해 봐야 한다”라고 강조했다.

그러나 볼리덴에게는 단기적으로 심각한 위험이 없다고 보고 있다. 그는 “우리는 카메라로 사물을 검사하는 실험을 거친 이미지 분석을 주로 사용한다. 나는 사람과 생성형 AI와 관련된 편향된 데이터를 더 우려한다. 소비자 지향적인 정보를 생성하고 소비자 데이터를 사용하는 AI에 대한 걱정이 더 많다”라고 말했다.

커르델은 AI가 창의적인 능력을 약화시키고 창의적인 사고를 억제할 위험도 보인다고 말했다.

철저한 조사
스칸디아(Skandia) CIO 요한 클라우센은 새로운 해결책이 도입될 때 수요와 위험을 평가하는 것이 중요하다고 강조했다. 그러나 당분간은, 볼리덴과 슈테른스프토프와 마찬가지로, 그의 회사 내에서의 AI 사용에는 아무런 위험이 없다고 보고 있다.

그는 “우리의 AI 사용 범위는 매우 한정되어 있으므로 현재로서는 편향된 데이터를 문제로 보지 않는다. 우리가 보유한 외부 데이터 소스는 믿을 수 있다”라고 말했다.

그러나, 향후에 발생할 수 있는 문제에 대비해야 하며, 이를 위해서는 안전한 데이터가 있어야 할 곳과 애초에 왜곡된 데이터 사용이 용인되는 부분을 고민한 후 그 모델에 기반한 통제장치를 수립하는 것이 중요하다고 그는 강조했다.

이들 CIO는 AI에 존재하는 역량 부족이 곧 위험에 영향을 미칠 것이라는 데 동의했다. 커르델은 새로운 기술이 등장하면 항상 역량 부족 현상이 있으며 이는 모든 회사에게 일반적인 장애물이라는 사실을 구체적으로 지적했다. 이와 동시에 그는 회사들에게는 많은 사람이 생각하는 것보다 더 많은 시간이 있다고 믿고 있다.

그는 “발전하는 기술과 관련하여 문제는 얼마나 빠르게 그 기술을 적용할 것인가 하는 것이다. 대규모로 적용하려면 생각보다 시간이 오래 걸릴 것이라고 생각한다”라고 말했다. ciokr@idg.co.kr
CIO Korea 뉴스레터 및 IT 트랜드 보고서 무료 구독하기
Sponsored
추천 테크라이브러리

회사명:한국IDG 제호: CIO Korea 주소 : 서울시 중구 세종대로 23, 4층 우)04512
등록번호 : 서울 아01641 등록발행일자 : 2011년 05월 27일

발행인 : 박형미 편집인 : 천신응 청소년보호책임자 : 한정규
사업자 등록번호 : 214-87-22467 Tel : 02-558-6950

Copyright © 2024 International Data Group. All rights reserved.