레이크하우스 관리 고려 사항
레이크하우스를 보호하는 방법 및 CI/CD(연속 통합 및 지속적인 업데이트)를 처리하는 방법을 포함하여 레이크하우스를 관리할 때 몇 가지 고려 사항이 있습니다.
레이크하우스 안전하게 보호
권한 있는 사용자만 데이터에 액세스할 수 있도록 하여 레이크하우스를 보호합니다. Fabric에서는 작업 영역 또는 항목 수준에서 권한을 설정하여 이를 수행할 수 있습니다.
작업 영역 권한은 작업 영역 내의 모든 항목에 대한 액세스를 제어합니다. 항목 수준 권한은 작업 영역 내의 특정 항목에 대한 액세스를 제어하며, 동일한 작업 영역에 있지 않은 동료와 공동 작업하거나 단일 특정 항목에만 액세스해야 하는 경우에 사용할 수 있습니다.
개선된 보안과 효율적인 용량 관리를 위해 레이크하우스의 다양한 계층을 별도의 작업 영역에 전략적으로 저장할 수 있습니다. 이 방식은 보안을 강화할 뿐만 아니라 비용 효율성도 최적화합니다.
- 보안 및 액세스 고려 사항: 각 계층에서 액세스해야 하는 사용자를 정의하여 권한 있는 직원만 중요한 데이터와 상호 작용할 수 있도록 합니다.
- 골드 레이어 액세스 제어: 최소 권한의 중요성을 강조하면서 읽기 전용 목적으로 골드 레이어에 대한 액세스를 제한합니다.
- 실버 레이어 사용률: 사용자가 실버 레이어를 기반으로 빌드할 수 있는지 여부를 결정하여 유연성과 보안의 균형을 조정합니다.
- 브론즈 레이어 액세스 제어: 최소 권한의 중요성을 강조하면서 읽기 전용 목적으로 브론즈 레이어에 대한 액세스를 제한합니다.
Fabric 콘텐츠 공유는 조직의 보안 정책과 일치하는지 확인하기 위해 조직의 보안 팀과 논의해야 합니다.
CI/CD(연속 통합/지속적인 업데이트) 지원에 대한 고려 사항
레이크하우스 아키텍처를 위한 CI/CD(연속 통합/지속적인 업데이트) 프로세스를 설계하려면 원활하고 효율적인 배포 프로세스를 보장하기 위한 몇 가지 고려 사항이 필요합니다. 고려 사항에는 데이터 품질 검사, 버전 제어, 자동화된 배포, 모니터링 및 보안 측정값 구현이 포함됩니다. 안정적이고 효율적인 데이터 파이프라인 배포를 보장하려면 확장성, 재해 복구, 협업, 규정 준수 및 지속적인 개선도 고려해야 합니다. 이들 중 일부는 프로세스 및 사례와 관련되어 있지만 다른 일부는 CI/CD를 구현하는 데 사용되는 도구 및 기술과 관련되어 있습니다. Fabric은 기본적으로 CI/CD 프로세스를 지원하는 여러 도구와 기술을 제공합니다.
Microsoft Fabric의 Git 통합을 통해 개발 프로세스, 도구 및 모범 사례를 Fabric 플랫폼에 직접 통합할 수 있습니다. Fabric의 Git 통합을 통해 데이터 팀은 작업을 백업 및 버전화하고, 필요에 따라 이전 단계로 되돌리고, Git 분기를 사용하여 다른 사람과 협업하거나 단독으로 작업하고, 친숙한 소스 제어 도구의 기능을 활용하여 Fabric 항목을 관리할 수 있습니다.
참고 항목
git 통합 소개에서 Fabric의 Git 통합에 대해 자세히 알아봅니다.
CI/CD는 유효성이 검사되고 신뢰할 수 있는 고품질 데이터를 사용할 수 있도록 보장하므로 레이크하우스의 골드 계층에서 매우 중요합니다. 자동화된 프로세스를 통해 새로운 데이터, 데이터 변환 및 업데이트를 연속적으로 통합하여 수동 오류를 줄이고 다운스트림 사용자 및 애플리케이션에 일관되고 최신의 인사이트를 제공할 수 있습니다. 이를 통해 데이터 정확도가 향상되고, 의사 결정이 가속화되며, 데이터 기반 이니셔티브가 효과적으로 지원됩니다.