제조 현장은 지금 데이터의 홍수 속에 있습니다. 5G 네트워크의 확산과 함께 스마트팩토리의 각종 센서와 설비에서는 초당 수십만 건 이상의 데이터가 실시간으로 발생하고 있습니다. 문제는 이 방대한 데이터를 어떻게 효율적으로 수집하고, 처리하며, 의미 있는 인사이트로 전환할 것인가 하는 점입니다.
데이터센트릭은 오라클 클라우드 기술과 엣지 AI를 결합한 데이터패브릭 플랫폼 'WhaleShark-DaaS'를 통해 이 문제에 대한 혁신적인 해답을 제시하고 있습니다.
글로벌 데이터 산업은 가파른 성장세를 보이고 있습니다. 2022년 기준 전 세계 데이터 시장 규모는 492.1십억 달러에 달하며, 2017년부터 2022년까지 연평균 14.6%의 높은 성장률을 기록했습니다. 특히 미국 시장은 242.4억 유로 규모로 19.4%의 성장률을 보이며 시장을 선도하고 있습니다.
국내 시장 역시 예외가 아닙니다. 2021년 기준 데이터 처리 및 관리 솔루션 시장은 2조 9,843억 원 규모로 전년 대비 18.7% 성장했으며, 3개년 연평균 성장률(CAGR)은 14.1%로 전체 데이터 산업 평균(11.9%)을 상회하고 있습니다. 2022년에는 3조 2,723억 원으로 확대될 것으로 전망됩니다.
이러한 성장의 핵심 동력은 엣지 컴퓨팅입니다. 전통적인 클라우드 중심 아키텍처에서는 모든 데이터를 중앙 데이터센터로 전송해야 했지만, 이는 세 가지 치명적인 문제를 야기합니다.
첫째, 지연 시간(Latency) 문제
제조 현장의 이상 징후 감지나 품질 관리는 밀리초 단위의 실시간 대응이 필요하지만, 클라우드 왕복 시간만으로도 수백 밀리초가 소요됩니다.
둘째, 대역폭 비용 문제
초당 수십만 건의 시계열 데이터를 지속적으로 클라우드로 전송하는 것은 막대한 네트워크 비용을 발생시킵니다.
셋째, 보안 위험 노출
데이터 전송 단계가 많아질수록 보안 위협에 노출될 가능성이 높아집니다.
이러한 한계를 극복하기 위해 엣지에서 데이터를 1차 처리하고, 필요한 정보만 클라우드로 전송하는 하이브리드 아키텍처가 새로운 표준으로 자리 잡고 있습니다.
AI 기술의 급격한 발전으로 데이터 기반 의사결정의 중요성이 그 어느 때보다 강조되고 있지만, 많은 기업들이 데이터 사일로(Data Silo) 문제로 어려움을 겪고 있습니다. 조직 내 여러 부서와 시스템에 데이터가 분산되어 있어 필요한 데이터에 접근하고 통합하는 과정이 복잡하고 비효율적입니다. 이는 데이터의 불완전성과 부정확성을 초래하며, 불필요한 추가 작업이 반복적으로 발생하게 됩니다.
"데이터패브릭(Data Fabric)"은 이러한 문제를 해결하기 위한 통합 데이터 관리 아키텍처입니다. 물리적으로 분산된 데이터를 논리적으로 통합하여, 사용자가 데이터의 위치나 형식에 관계없이 일관된 방식으로 접근할 수 있게 합니다.
데이터센트릭이 오라클 클라우드 인프라(OCI)를 선택한 것은 필연적이었습니다. 특히 OCI GoldenGate는 데이터패브릭 아키텍처 구현에 있어 대체 불가능한 핵심 요소입니다.
OCI GoldenGate는 실시간 데이터 복제 및 통합 서비스로, 다음과 같은 강력한 기능을 제공합니다.
1. 실시간 데이터 캡처 및 전송
트랜잭션 로그 기반 CDC(Change Data Capture) 방식으로 소스 시스템에 부하를 최소화하면서 데이터 변경사항을 실시간으로 캡처하며, 초고속 데이터 처리 목표인 200,000 EPS(Events Per Second) 이상을 안정적으로 지원합니다.
2. 이기종 데이터베이스 통합
Oracle, MySQL, PostgreSQL 등 다양한 RDBMS는 물론 NoSQL, 클라우드 스토리지까지 폭넓은 소스를 지원하여, 제조 현장의 다양한 시스템(ERP, MES, SCADA 등)에서 발생하는 데이터를 단일 플랫폼으로 통합합니다.
3. 양방향 동기화 및 충돌 해결
엣지와 클라우드 간 양방향 데이터 동기화를 지원하며, VPN 터널링을 통한 보안 통신과 자동 충돌 해결 메커니즘을 제공합니다.
4. 제로 다운타임 마이그레이션
기존 시스템 운영을 중단하지 않고 새로운 데이터 아키텍처로 전환할 수 있어, 제조 현장의 24/7 운영 환경에 최적화되어 있습니다.
WhaleShark-DaaS는 OCI의 다양한 서비스를 통합하여 엔드-투-엔드 데이터 처리 파이프라인을 구축합니다.
제조 현장에서 WhaleShark-DaaS의 가치는 명확합니다. 한 자동차 부품 제조 기업의 사례를 살펴보겠습니다.
1. 도전 과제
2. 솔루션 구현
엣지 레이어에서 WhaleShark AIoT 모듈이 생산 설비에 직접 연결되어 동작합니다. Intel i5-13600K 기반의 소형 Mini PC(RAM 32GB, SSD 512GB)에서 실시간 영상 분석과 센서 데이터 처리를 동시에 수행합니다.
3. 영상 기반 품질 검사
4. 센서 데이터 이상 탐지
엣지에서 처리된 데이터는 압축 후 OCI GoldenGate를 통해 클라우드로 전송됩니다. 메타데이터 기반 데이터 카탈로그를 통해 3년치 생산 데이터를 통합 관리하며, 이를 기반으로 품질 예측 모델을 지속적으로 개선합니다.
| 40% 불량률 감소 | 15% 설비 가동률 향상 |
| 65% 네트워크 비용 절감 | 80% 데이터 분석 시간 단축 |
물류 로봇 제조사와의 협업에서는 AGV/AMR의 예지보전 시스템을 구축했습니다. 로봇에 탑재된 WhaleShark AIoT 모듈이 모터 전류, 배터리 상태, 주행 궤적 등을 실시간 모니터링하며, LSTM 모델을 이용하여 부품 수명을 예측합니다.
클라우드에서는 수백 대의 로봇 데이터를 통합 분석하여 운영 패턴을 최적화하고, 예방 정비 일정을 자동으로 수립합니다. OCI Auto Scaling 기능으로 피크 시간대 분석 부하를 탄력적으로 처리합니다.
WhaleShark-DaaS는 GIS 데이터 기준 200,000 EPS 이상의 처리 성능을 목표로 합니다. 이는 글로벌 선두 기업인 Splunk의 184,000 EPS를 상회하는 수준입니다. 이러한 성능은 다음의 기술적 혁신으로 가능합니다.
|
메타데이터 기반 데이터 압축
70%
평균 압축률
(특허 제10-2732271호) |
병렬 분석 처리
MSA
Docker 기반
마이크로서비스 아키텍처 |
|
적응형 메타데이터 동기화
10배
조회 속도 향상
(Cache Meta 활용) |
OCI Container Engine
K8s
쿠버네티스
완벽 통합 |
중소기업의 가장 큰 어려움은 데이터 분석 전문 인력의 부재입니다. WhaleShark-DaaS는 No-Code/Low-Code 인터페이스를 통해 이 문제를 해결합니다.
특정 벤더에 종속되지 않는 개방형 아키텍처를 지향합니다. Altibase, CUBRID 등 국산 DBMS는 물론, PostgreSQL, MongoDB 등 오픈소스 데이터베이스와도 완벽하게 연동됩니다.
OCI의 48개 글로벌 리전을 활용하여 지역별 규제 요구사항(GDPR, 데이터 로컬라이제이션 등)을 준수하면서도 글로벌 데이터 통합이 가능합니다.
데이터센트릭은 오라클 클라우드와의 전략적 파트너십을 통해 글로벌 시장 진출을 가속화하고 있습니다.
1. 오라클 마켓플레이스 등록
전 세계 오라클 고객에게 WhaleShark-DaaS를 제공하며, 오라클 클라우드 크레딧으로 서비스 구매가 가능합니다. 또한 오라클 세일즈 채널을 통한 공동 영업을 진행합니다.
2. 글로벌 네트워킹
Oracle CloudWorld (OCW) 참가를 예정하고 있으며, 미국, 싱가포르 오라클 글로벌 전문가와 기술 협력을 진행합니다. Oracle Cloud Summit 아시아 지역에서 성공 사례를 발표할 계획입니다.
3. 중동 시장 진출
UAE 두바이 쿠리그룹과 MOU를 체결했으며, 사우디아라비아 NEOM 스마트시티 프로젝트 참여를 추진하고 있습니다. OCI 중동 리전(아부다비, 제다)을 활용한 현지화 서비스를 제공합니다.
이미 몽골과학기술대학교와의 협력을 통해 교육 플랫폼으로 WhaleShark-DaaS를 제공하고 있으며, 인도네시아, 대만 등 아시아 지역으로 확장 중입니다.
현재 WhaleShark AIoT Ver 2.0에서 DaaS로의 전환 작업이 진행 중입니다. 주요 고도화 내용은 다음과 같습니다.
MLOps 통합
Active Metadata 고도화
멀티 클라우드 지원
가트너는 2025년까지 전 세계 기업의 75%가 데이터패브릭을 도입할 것으로 전망합니다. 특히 제조업에서의 수요가 급증할 것으로 예상되며, 국내 스마트제조 시장도 정부의 제조업 디지털 전환 정책에 힘입어 연평균 20% 이상 성장할 것으로 보입니다.
| 25억원 매출 목표 | 30% 해외 시장 비중 |
구독형(SaaS) 150만원/월, 구축형(ODM) 1,500만원, 커스터마이징(SI) 1.5억원 등 다양한 비즈니스 모델로 중소기업부터 대기업까지 폭넓은 고객층을 공략합니다.
"데이터는 21세기의 원유"라는 말이 있지만, 원유를 캐내는 것만으로는 부족합니다. 정제하고, 운송하고, 활용할 수 있는 인프라가 필요합니다. 엣지 AI와 데이터패브릭은 바로 이러한 데이터 인프라의 핵심입니다.
데이터센트릭의 WhaleShark-DaaS는 오라클 클라우드 기술과 자체 개발한 엣지 AI 기술을 결합하여, 중소 제조기업도 손쉽게 데이터 기반 의사결정을 실현할 수 있도록 돕습니다. 특히 OCI GoldenGate를 활용한 실시간 데이터 통합은 분산된 제조 현장의 데이터 사일로를 허물고, 진정한 의미의 스마트팩토리를 구현하는 기술적 토대가 됩니다.
한국오픈소스협회 | Korea Open Source Association
본 기고문은 데이터센트릭 장동훈 대표가 작성하였습니다.
