Databricks AI/BI란?
Databricks AI/BI는 데이터의 의미 체계에 대한 심층적 이해 기반을 제공하도록 디자인된 새로운 유형의 비즈니스 인텔리전스 제품으로, 조직의 모든 사용자에게 셀프 서비스 데이터 분석을 지원합니다. AI/BI는 ETL 파이프라인, 계보 및 기타 쿼리를 포함하여 Azure Databricks 플랫폼에서 데이터의 전체 수명 주기로부터 인사이트를 도출하는 복합 AI 시스템을 기반으로 합니다.
AI/BI의 작동 방식
복합 AI 시스템은 여러 AI 기술 또는 모델을 결합하여 복잡한 문제를 해결합니다. 복합 AI 시스템은 단일 AI 모델 또는 알고리즘에 의존하는 대신 상호 작용하는 여러 구성 요소를 통합하여 성능과 정확도를 향상시킵니다.
예를 들어 고객 피드백을 분석하는 시스템에서 자연어 처리를 사용하여 텍스트 감정을 이해하는 동시에, 기계 학습 모델은 이 감정에 따라 고객 동작을 예측할 수 있습니다. 이러한 보완적인 AI 기술을 활용하여 복합 AI 시스템은 개별 AI 모델만 사용했을 때보다 더 정확하고 통찰력 있는 결과를 제공할 수 있습니다.
기존 BI 도구는 보고서 및 대시보드에 의존하며, 새 시각화를 만들기 위해 데이터 전문가의 광범위한 참여가 필요한 경우가 많습니다. 이 문제를 해결하기 위해 BI 도구에 AI 도우미가 통합되었지만 실제 데이터 복잡성으로 어려움을 겪는 경우가 많으며, 데모에서는 깊은 인상을 남겨도 실전에서는 실패합니다.
조직의 의미 체계 모델은 종종 데이터로 작업하는 사람이 보유한 지식에 의존합니다. Databricks AI/BI는 Databricks 간 상호 작용에서 이러한 이해 기반을 캡처합니다. 데이터 인텔리전스 플랫폼의 기존 컨텍스트를 보강하여 이 지식을 활용하여 실용적이고 실제적인 답변을 제공합니다. 다음과 같은 두 가지 보완적인 제품 환경을 제공합니다.
- AI/BI 대시보드: 고정된 비즈니스 질문에 답변하기 위한 기존의 모든 BI 기능을 포함하는 AI 기반의 낮은 코드 대시보드 솔루션입니다.
- Genie: 사용자 피드백을 기반으로 기본 데이터 및 의미 체계를 지속적으로 학습하는 대화형 인터페이스입니다. 데이터 팀에서 지정한 쿼리 패턴에 대해 신뢰할 수 있는 자산을 제공하면서 추론 기능에 따라 훨씬 더 광범위한 비즈니스 질문에 답변할 수 있습니다.
AI/BI 대시보드
대시보드는 여전히 정기적으로 사용하도록 미리 정의된 분석을 운영하는 효과적인 방법입니다. AI/BI 대시보드는 데이터 및 시각화 구성을 간소화하는 AI 기반의 로우코드 작성 환경을 통해 이 프로세스를 간소화합니다. 이 대시보드에는 시각화, 교차 필터링 및 이메일을 통한 정기적 PDF 스냅샷과 같은 표준 BI 기능이 포함됩니다. 의미 체계 모델, 데이터 추출 또는 추가 관리 서비스가 필요하지 않습니다. 대시보드를 참조하세요.
AI/BI Genie
대시보드에서 다루지 않는 광범위한 질문을 해결하기 위해 AI/BI는 Genie라는 대화형 인터페이스를 제공합니다. 기존 고정 차트 도구와 달리 Genie는 기본 데이터에서 학습하고 적응 가능한 시각화 및 제안과 함께 사용자 쿼리에 응답할 수 있습니다. 여기에서는 명확한 설명을 모색하고 필요에 따라 대체 솔루션을 제공합니다. Genie는 시간 경과에 따라 사용자 피드백을 통해 개선되도록 디자인되었으며, 분석가가 출력을 확인하고 구체화할 수 있는 도구를 제공합니다. 지침, 신뢰할 수 있는 자산, 신뢰도 투표 및 품질 모니터링과 같은 기능을 통해 데이터 팀은 Genie의 성능을 미세 조정하고 신뢰할 수 있는 응답을 보장할 수 있습니다.
Genie는 신뢰할 수 있는 자산과 같은 도구 시스템을 사용하여 신뢰성을 높입니다. 분석가는 Unity 카탈로그와 같은 원본의 신뢰할 수 있는 논리를 Genie에 통합하여 유효성이 검사된 논리로 질문에 답변하고 제공된 답변의 신뢰할 수 있는 상태를 투명하게 공유할 수 있습니다.
genie 공간의 작동 방식에 대한 자세한 내용은 AI/BI 지니 공간란?을 참조하세요.
플랫폼 통합
Databricks AI/BI는 Databricks 데이터 인텔리전스 플랫폼에 기반하여 빌드되었고 이와 긴밀하게 통합되어 있습니다. 다음은 AI/BI의 주요 기능입니다.
- 통합 거버넌스 및 계보: AI/BI는 Unity 카탈로그에 원활하게 통합되어 거버넌스 프레임워크에 맞게 조정되고 관리자가 설정한 전역 정책을 준수합니다. Unity 카탈로그의 계보 시각화를 통해 데이터 생산자 또는 관리자는 AI/BI 내에서 데이터 자산의 사용량을 추적할 수 있습니다. 데이터 세트의 수집에 대한 이러한 역추적 가능성은 분석 결과의 신뢰도를 높여줍니다.
- 새 사용자 라이선스 없이 원활한 공유: AI/BI는 널리 사용되는 많은 IDP에 직접 통합되는 Databricks IAM 플랫폼에 기본 제공되므로 조직의 모든 사용자와 분석을 공유할 수 있습니다. Databricks AI/BI에는 시트 기반 제한이 없으므로 새 라이선스를 추가하는 비용 없이 조직에서 모든 사용자를 추가할 수 있습니다.
- 업계 최고의 가격/성능: AI/BI는 고성능 상호 작용을 제공하기 위해 고유한 최적화를 포함하는 SQL 웨어하우스 및 Photon 엔진과 긴밀하게 통합되어 있습니다. 메가바이트에서 페타바이트까지 다양한 데이터 볼륨에서 최적의 성능을 기대할 수 있습니다.
- 데이터 추출이 필요하지 않음: AI/BI는 기존 데이터 에코시스템과 통합되어 데이터 세트를 별도의 BI 엔진으로 추출할 필요가 없습니다. 이 통합을 통해 데이터 새로 고침을 개선하고 데이터 거버넌스를 간소화하여 데이터 분석 프로세스가 보다 간소화됩니다.
다음 단계
- 대시보드를 빌드합니다. 대시보드 자습서를 참조하세요.
- 지니 공간을 만듭니다. AI/BI Genie 공간을 설정하고 관리하는 방법을 참조하세요.