“AI시대, 이리저리 흩어진 데이터 통합 관리 중요해”

클라우데라 발표

인공지능(AI) 시대에선 데이터를 효율적으로 통합 관리할 수 있는 역량이 매우 중요하다는 진단이 나왔다. 양질의 데이터가 많을수록 AI가 도출해내는 결과 값 역시 우수해질 수 밖에 없기 때문이다.

기업용 인공지능(AI)에 최적화된 글로벌 데이터 기업 클라우데라는 이러한 내용을 담은 ‘AI 시대의 데이터 아키텍처와 전략’ 설문조사 결과를 1일 발표했다.

클라우데라의 의뢰로 파운드리(Foundry)가 실시한 이번 설문조사는 600명 이상의 데이터 분야 리더와 정보기술(IT) 의사결정권자를 대상으로 최신 데이터 아키텍처 현황과 함께 AI의 부상이 데이터 전략에 미치는 영향을 분석했다.

그 결과 IT 리더의 90%가 분석과 AI를 위해선 단일 플랫폼에서 데이터 라이프사이클을 통합하는 것이 매우 중요하다고 답했다.

이와 관련 클라우데라 측은 “생성형 AI가 점차 대중화됨에 따라 신뢰할 수 있는 데이터 확보도 중요해지고 있다”면서 “AI 인사이트는 훈련한 데이터에 의해 결정되기 때문”이라고 설명했다.

실제로 이번 설문에서도 응답자들은 데이터의 품질과 가용성(36%), 확장성과 구축(36%), 기존 시스템과의 통합(35%), 변경사항 관리(34%), 모델 투명성(34%)으로 인해 AI 여정에 어려움을 겪고 있는 것으로 나타났다. 이를 통해 많은 기업이 AI에 투자하고 있지만 해결해야 할 근본적인 문제는 여전히 존재하는 것을 유추할 수 있다는 분석이다.

아바스 리키(Abhas Ricky) 클라우데라 최고 전략 책임자(CSO)는 “비즈니스 혁신과 고객 지향 디지털, AI 지원 솔루션을 구축하려는 기업이 늘어나면서 하이브리드와 멀티클라우드 전략 채택이 늘어나고 있다”면서 “이로 인해 LOB, 기능 단위, 비즈니스 애플리케이션, 실무자 팀 전반에 걸쳐 데이터가 무질서하게 축적되는 ‘데이터 스프롤’, 설계 한계를 뛰어넘는 ‘아키텍처 오버런’이 발생한다”고 말했다.

그러면서 그는 “AI를 효과적으로 활용하기 위해 기업은 표준화된 사용 사례 중심의 데이터 아키텍처와 플랫폼을 설계, 구축해 서로 다른 팀들이 데이터의 위치에 관계없이 ‘모든 데이터’를 활용해야 한다”고 덧붙였다.

특히 설문조사에 의하면 효과적인 AI를 구축하고자 하는 기업이 기본적으로 갖춰야 할 세 가지 필수 요소는 ▲비즈니스 전략에 기반한 최신 데이터 아키텍처 ▲데이터 통합 관리 ▲다양한 기능을 가진 안전한 데이터 플랫폼이다.

첫번째 필수 요소는 비즈니스 전략에 기반한 최신 데이터 아키텍처다.

퍼블릭 클라우드와 온프레미스 모두에서 원활하게 작동하는 단일 데이터 플랫폼은 이 요소의 핵심이다. 최신 데이터 아키텍처의 이점에 대해 응답자가 가장 많았던 답변은 데이터, 분석 프로세스 간소화(40%)였고 두번째로 많았던 답변은 모든 유형의 데이터를 유연하게 처리할 수 있는 유연성 확보(38%)다.

두번째 필수 요소는 데이터 통합 관리다.

오늘날의 기업은 유연하고 확장 가능한 클라우드 관리 기술을 요구한다. 이러한 기술은 정보를 인사이트로 전환할 수 있는 툴을 제공한다. AI 모델 개발에 필요한 종단간 데이터 관리를 방해하는 요소로 응답자들은 데이터의 양과 복잡성(62%), 데이터 보안(56%), 거버넌스 및 규정 준수(52%)라고 답했다.

마지막 필수 요소는 다양한 기능을 가진 안전한 데이터 플랫폼이다.

데이터, 분석 전략으로는 온프레미스와 퍼블릭 클라우드 환경 모두 관리할 수 있는 하이브리드 데이터 관리 방식이 주로 쓰인다. 응답자의 93%는 ‘데이터, 분석을 위한 멀티클라우드·하이브리드 기능은 기업이 변화에 적응하기 위한 필수 요소’라고 답했다.

리키 CSO는 “기업은 비용 효율적 데이터 전략을 통해 최고의 성과를 달성하고 AI 이니셔티브를 강화하길 원한다”며 “데이터를 최대로 활용하고자 하는 기업은 최신 플랫폼과 AI 아키텍처를 신속하게 구축해야 한다”고 전했다.

이어 “클라우데라는 업계 유일의 하이브리드 멀티클라우드 데이터 플랫폼으로 고객이 어디서나 데이터를 사용할 수 있도록 한다”면서 이로써 데이터와 AI 관련 문제를 해결할 수 있다“고 강조했다.

[ⓒ 매일경제 & mk.co.kr, 무단 전재, 재배포 및 AI학습 이용 금지]