한국EMC, 하둡 기반의 실시간 분산형 인메모리 통합 분석 플랫폼 출시

피보탈 HD 1.1과 피보탈 젬파이어 XD

[보안뉴스 김태형] 하둡 기반의 실시간 분산형 인메모리 통합 분석 플랫폼이 출시됐다. 한국EMC(대표 김경진 http://korea.emc.com)는 업계 최초로 하둡 기반의 실시간 분산형 인메모리 통합 분석 플랫폼인 ‘피보탈 HD 1.1(Pivotal HD 1.1)’과 ‘피보탈 젬파이어 XD(Pivotal Gemfire XD)’를 출시했다고 밝혔다.

올 4월에 출시된 하둡 기반의 빅데이터 분석 플랫폼인 ‘피보탈 HD’와 실시간 인메모리 데이터 그리드 (In Memory Data Grid, IMDG) 제품인 ‘피보탈 젬파이어 XD’를 결합시킴으로써 빅데이터 플랫폼에서 패스트 데이터를 처리하는 세계 최초의 통합 분석 플랫폼이 탄생하게 된 것이다.

또한, 이 통합 분석 플랫폼은 ‘피보탈 젬파이어 XD’가 ‘피보탈 HD’의 SQL 인터페이스를 제공하는 ‘호크(HAWQ)’ 쿼리 엔진 기술과 결합되면서 OLTP(Online Transaction Processing)와 OLAP(Online Analytical Processing)를 단일 플랫폼에서 동시 지원하여 기업 내 발생하는 모든 트랜잭션 데이터를 실시간 취합 분석하고 빠른 의사결정을 내릴 수 있도록 지원한다.

‘피보탈 젬파이어 XD’는 여러 시스템의 메모리에 데이터를 분산시켜 저장하고 처리하는 실시간 분산 데이터 그리드 제품이다. 필요에 따라 인메모리 데이터 저장소를 늘릴 수 있는 유연성과 이에 따른 실시간 데이터 처리 성능 향상은 물론, 선형적인 용량 및 성능 확장이 가능하며, 분산 시스템의 데이터 정합성도 유지된다는 특징이 있다. 기업은 ‘피보탈 젬파이어 XD’를 통해 위험 분석에 소요되는 시간을 6시간에서 20분까지 줄일 수 있으며, 다운타임 없이 10억 개에 달하는 고객 예약을 동시에 처리할 수 있는 예약시스템을 구축할 수 있게 되었다.

한편, ‘피보탈 HD’에 처음 도입된 ‘호크’는 다양한 종류의 데이터 분석 도구와 언어를 단일한 형태의 SQL 인터페이스 기반으로 제공하여 다양한 쿼리 및 데이터 분석에 대한 응답 속도를 최소 100배에서 최대 600배까지 획기적으로 높이는 기술이다.

한국EMC 김경진 대표는 “오늘날 기업들은 수많은 데이터를 실시간으로 처리 및 분석하고 이를 바탕으로 주요 사안들에 대해 정확하고 빠른 의사결정을 내려야 한다”며 “이를 위해 데이터 웨어하우스, 하둡 기반 파일시스템 및 트랜잭션 데이터베이스 등의 모든 데이터를 실시간으로 처리하고 분석하는 통합 플랫폼을 구축해야 한다”면서 “피보탈 젬파이어 XD는 ‘피보탈 HD’ 기반의 SQL 인메모리 데이터 그리드로 통합되어 새로운 차원의 실시간 분산형 통합 분석 플랫폼으로 고객에게 제공될 것”이라고 강조했다.

[김태형 기자(boan@boannews.com)]

AI 및 AI 보안 솔루션이 보안 인력의 업무에 어떤 식으로 영향을 미칠것이라고 생각하시나요
	부족한 인력 보충: 만성적인 인력 부족 문제를 해결하는 보완재 역할을 하고 있다(100% 대체는 불가)
	업무 영역의 분리: AI는 대량 데이터 처리를, 전문가는 고도의 전략적 판단을 맡는 등 역할이 완전히 다르다
	업무 총량의 전이: 단순 업무는 줄었으나, AI 모델 관리·검증 등 새로운 형태의 운영 업무가 발생해 전체 업무량은 비슷하다
	인력 대체 가능: 단순 반복 업무를 넘어 분석/판단 영역까지 대체하여 인력을 줄일 수 있다
	신뢰도 부족: 아직은 AI의 오탐이나 환각(Hallucination) 우려로 인해 사람이 일일이 재검토해야 하므로 실질적인 도움은 적다