도메인 중심, 연합 데이터 소유권의 힘
오늘날의 극도로 경쟁적인 환경에서 기업들은 실시간 스트림 및 배치 데이터 가용성을 가능하게 하는 데이터 레이크를 점점 더 선택하고 있습니다. 조직들은 중앙 집중식 플랫폼을 통해 데이터를 수집, 강화, 변환 및 제공하려는 의도로 이에 접근하고 있습니다.
그러나 대부분의 조직의 경우 이 아키텍처에는 여러 가지 단점이 있습니다.
- 데이터는 분산되어 특정 팀과 사용 사례에만 국한되므로 공유 능력이 제한됩니다.
- 전체적인 관점이 부족하고 조직 전체에서 데이터를 발견하는 능력이 부족하여 실험하고 혁신하는 능력이 제한됩니다.
- 중앙 저장소는 서비스할 수 있는 페르소나와 관련 사용 사례로 제한됩니다.
- 이러한 아키텍처는 중앙 팀이 유입 데이터 소스를 제한적으로 이해하고 있기 때문에 데이터를 보호하고 관리하는 능력에 문제가 있습니다.
- 이러한 아키텍처는 비용이 많이 들고, 유연하지 않으며, 느리기 때문에 끊임없이 변화하는 기업을 지원하는 능력이 제한됩니다.
혼란스러운 데이터 호수는 데이터 팀이 백로그에 있는 것 외에도 참을성 없고 연결이 끊긴 데이터 소비자를 초래합니다. 이는 사용자가 대체 수단을 통해 데이터와 통찰력에 액세스하려고 하기 때문에 데이터 드리프트와 데이터 사일로의 추가 생성으로 이어집니다.
당사의 데이터 메시 서비스는 도메인과 사업 영역에 패러다임 전환을 제공하며, 중앙 집중형 데이터 아키텍처가 필요 없이 향상된 분석을 수행할 수 있는 기능을 제공합니다. 이 시스템은 귀사의 손에 통제권을 부여하여 귀사가 자체 데이터 품질, 거버넌스, 보안 및 가용성을 관리할 책임을 질 수 있도록 합니다.
Trianz 데이터 메시 성숙도 모델
Trianz는 고객이 데이터 메시 배포를 평가하고 계획하는 데 도움이 되는 Data Mesh Maturity Model을 만들었습니다. 이는 크게 생각하지만 작게 시작하는 명확한 경로를 제공하여 조직이 성숙도, 문화 및 역량에 따라 점진적으로 채택하고 자체 속도에 맞춰 학습할 수 있도록 합니다.
실험. 데이터 연합을 활용하여 비즈니스 페르소나는 데이터에 즉시 액세스하여 탐색하고 이해하고 통찰력을 얻습니다. 이 단계에서는 여러 개의 별도 데이터 사일로를 연결하여 해당 데이터에 대한 단일 유리 패널을 만듭니다.
1단계는 데이터 활용이 특징이지만 데이터 활용이 부족합니다. 이 기업은 사일로 내에서 있는 그대로 데이터를 사용하지만 도메인 간에 통찰력을 식별하여 추가 통찰력과 가치를 추출하는 능력이 부족합니다. 분석은 사일로화된 데이터 아키텍처로 인해 임시방편이며, 통찰력 생성에 장벽이 됩니다. 제한된 데이터 거버넌스 기능으로 인해 데이터 의미(단일 진실 소스)가 가시화되지 않아 데이터 신뢰 문제가 발생합니다.
일반적으로 각 사일로에 대한 데이터 전략은 IT가 소유하고 비즈니스 이해 관계자의 의견을 수렴하여 개발합니다. 각 사일로마다 필요에 맞춰 다른 거버넌스 규칙과 액세스 방법이 있으므로 진정한 비즈니스 중심 데이터 접근 방식은 더 어렵습니다. 이로 인해 데이터 액세스와 통찰력 생성에 대한 조직적, 문화적 장벽이 발생합니다.
2단계에서 기업은 데이터 소유권의 요소를 실험하기 시작해야 합니다. 여기서 사일로는 해당 데이터에 대한 책임이 있거나 "소유"합니다. 즉, 해당 도메인 내에서 데이터의 품질, 보안, 거버넌스, 일관성 및 가용성에 대한 책임이 있습니다.
이 단계에서 기업은 데이터 전략이 비즈니스 전략에 중요하다는 것을 이해하기 시작하고, 따라서 그 전략에 대한 소유권을 더 많이 갖기 시작합니다. 이러한 전략을 지원하기 위해 데이터 민첩성이 중요한 초점이 됩니다. 이러한 민첩성을 지원하기 위해 도메인 간 데이터 연결 및 공유가 필수적입니다. 그러나 이 단계는 여전히 중앙 집중식 제어를 포함하며, 중앙 집중식 팀이 데이터 운영을 중심으로 대부분의 활동을 수행합니다.
이 사업은 데이터 거버넌스와 액세스를 위한 일반적인 보호 장치를 형성했습니다. 다음 단계는 이 거버넌스와 액세스 제어 프레임워크를 연합하여 사업이 연합 소유권과 데이터 제품 개발로 성숙할 수 있도록 하는 것입니다.
도메인은 데이터 제품의 개발 및 공유에 대한 소유권과 관리를 적극적으로 맡고 있습니다. 연방 데이터 소유권의 개념과 관행이 성숙되기 시작합니다. 데이터 제품이 확립됨에 따라 이러한 제품은 도메인 간에 공유되고 새로운 고객 경험을 만들고, 새로운 통찰력을 생성하고, 새로운 기회를 탐색하고, 운영 효율성을 높이는 데 사용됩니다.
4단계에서는 분석의 출시 시간이 단축되고 비용이 절감되며, 셀프 프로비저닝 기능이 활성화되고 데이터 팀의 작업 부하가 줄어들고 산출량은 늘어납니다.
거버넌스는 데이터 제품 및 데이터 액세스 개발에 내장되어 자동화되며, 유연한 거버넌스 및 보안 프레임워크를 통해 데이터 서비스 모델과 DataOps가 가능합니다. 사용자 경험이 크게 개선되고 IT는 조직이 데이터 중심이 되도록 하는 진정한 지원자가 됩니다.
이 단계에서 기업은 완전한 데이터 메시 성숙도에 도달합니다. 모든 데이터는 제품으로 취급되며, 거버넌스와 소유권은 원래 데이터 소유자가 통합하고 관리하며, 중앙 집중식 가드레일의 유연성이 있습니다. 데이터 및 분석(D&A)은 광범위한 비즈니스 전략의 핵심 기둥이며, 데이터는 대부분의 중요한 비즈니스 의사 결정을 안내합니다. 통찰력은 일상적인 의사 결정 및 접점으로, 더 큰 인식과 민첩성으로 이어집니다.
조직은 새로운 데이터 소스에 원하는 대로 빠르게 액세스하고, 데이터 제품을 통합하고, 생성하거나 개선하여 데이터 이점을 가속화할 수 있습니다. 자동화된 거버넌스 및 보안 기능과 절대적인 투명성이 결합되어 위험이 크게 줄어듭니다. 도메인은 도메인 내의 데이터 제품에 대해 진정으로 책임을 지고 책임을 집니다. 이는 데이터 품질을 높여 데이터 신뢰를 구축함으로써 모호성을 줄이는 동시에 문제를 신속하게 해결하기 위한 명확한 소유권을 제공합니다.
