다음을 통해 공유

DatabricksIQ 신뢰 및 안전

  • 아티클

Databricks는 Databricks 서비스를 사용할 때 데이터의 중요성과 신뢰도를 이해합니다. Databricks는 최고 수준의 데이터 보호를 위해 최선을 다하고 있으며 정보가 보호되도록 엄격한 조치를 구현했습니다.

  • 데이터는 학습에 사용되지 않으며 모델 파트너는 데이터를 유지하지 않습니다.
    • Databricks와 모델 파트너(Azure OpenAI)는 모두 고객 데이터를 사용하여 모델을 학습하지 않습니다. 코드와 입력은 다른 고객에게 표시되는 제안을 생성하는 데 사용되지 않습니다.
    • 이러한 기능에서 Databricks가 제출한 데이터는 남용 모니터링을 위해 Azure OpenAI에서 유지되지 않습니다. 이러한 기능은 해당 목적을 위해 Azure의 데이터 보존에서 옵트아웃되었습니다.
  • 유해한 출력으로부터 보호합니다. 또한 Databricks는 Azure OpenAI 콘텐츠 필터링을 사용하여 유해한 콘텐츠로부터 사용자를 보호합니다. 또한 Databricks는 수천 개의 시뮬레이션된 사용자 상호 작용으로 광범위한 평가를 수행하여 유해한 콘텐츠, 탈옥, 안전하지 않은 코드 생성 및 제3자 저작권 콘텐츠의 사용으로부터 보호하기 위해 보호가 적용되도록 했습니다.
  • Databricks는 서비스를 제공하는 데 필요한 데이터만 사용합니다. 데이터는 AI 보조 기능과 상호 작용할 때만 전송됩니다. Databricks는 자연어 입력, 관련 테이블 메타데이터, 오류뿐만 아니라 입력 코드 또는 쿼리를 전송하여 데이터에 대한 보다 관련성 있는 결과를 반환합니다. Databricks는 행 수준 데이터를 보내지 않습니다.
  • 데이터는 전송 중에 보호됩니다. Databricks와 Azure OpenAI 서비스 간의 모든 트래픽은 업계 표준 TLS 암호화를 사용하여 전송 중에 암호화됩니다.
  • EU 데이터는 EU에 유지됩니다. 유럽 연합(EU) 작업 영역의 경우 AI 보조 기능은 EU에서 호스트되는 Azure OpenAI 모델을 사용합니다. Azure Geographies: 데이터 상주 및 Databricks 지정 서비스를 참조하세요.

Databricks Assistant 개인 정보에 대한 자세한 내용은 개인 정보 및 보안참조하세요.

파트너 기반 AI 보조 기능 설정에 의해 제어되는 기능

파트너 기반 AI 는 Azure OpenAI 서비스를 나타냅니다. 다음은 파트너 기반 AI 보조 기능 설정에 의해 제어되는 기능 의 분석입니다.

기능 모델이 호스트되는 위치는 어디인가요? 파트너 기반 AI 설정에 의해 제어되는가요?
Databricks 길잡이 채팅 Azure OpenAI 서비스 예
빠른 수정 Azure OpenAI 서비스 예
AI에서 생성된 UC 주석 CSP(규정 준수 보안 프로필) 작업 영역: Azure OpenAI 서비스 예, 모든 CSP 작업 영역에 대해.
AI/BI 대시보드 AI 지원 시각화 및 도우미 지니 공간 Azure OpenAI 서비스 예
Genie Azure OpenAI 서비스 예
Databricks Assistant 자동 완성 Databricks 호스팅 모델 아니요
지능형 검색 Azure OpenAI 서비스 예

Databricks Assistant에 Databricks 호스팅 모델 사용하기

중요하다

이 기능은 공개 미리 보기.

Databricks 호스팅 모델을 사용하여 Databricks Assistant에 전원을 공급하는 방법을 알아봅니다. 이 섹션에서는 작동 방식과 사용 방법을 설명합니다.

작동 방식

다음 다이어그램에서는 Databricks 호스팅 모델이 Databricks Assistant를 구동하는 방법에 대한 개요를 제공합니다.

Databricks 호스팅 모델에서 제공하는 Databricks Assistant에 대한 워크플로의 다이어그램입니다.

  1. 사용자가 코드 또는 질문을 입력하거나, 진단 오류을 선택하거나, 셀을 강조 표시하여 Databricks Assistant을 호출합니다.
  2. Databricks는 요청에 메타데이터를 연결하고 Databricks 호스팅 LLM(대규모 언어 모델)에 보냅니다. 모든 데이터는 미사용 시 암호화됩니다. 고객은 CMK(고객 관리형 키)를 사용할 수 있습니다.
  3. 사용자 요청은 Databricks 호스팅 모델로 전송됩니다.

Databricks 호스팅 모델은 Meta Llama 3.x를 사용합니다.

Databricks 호스팅 모델을 사용하는 Databricks Assistant는 현재 Meta Llama 3을 사용하여 빌드되었습니다. Meta Llama 3는 Meta Llama 3 Community License에 따라 라이선스가 부여됩니다. 저작권 © Meta Platforms, Inc. 모든 권리 보유.

Assistant용 Databricks 호스팅 모델에 대한 FAQ

제가 개인용 모델 서비스 인스턴스를 가질 수 있나요?

이때는 그렇지 않습니다. 이 미리 보기에서는 Databricks에서 관리하고 보호된 엔드포인트를 제공하는 모델 를 사용합니다. 모델 서비스 엔드포인트는 무상태이며, 여러 격리 계층을 통해 보호되고 데이터 보호를 위해 다음과 같은 보안 제어를 구현합니다.

  • 모델 서비스에 대한 모든 고객 요청은 논리적으로 격리되고 인증되며 권한이 부여됩니다.
  • Mosaic AI 모델 서비스 제공은 미사용 데이터(AES-256) 및 전송 중인 모든 데이터(TLS 1.2 이상)를 암호화합니다.

모델에 전송된 메타데이터가 사용자의 Unity 카탈로그 권한을 준수하나요?

예, 모델로 전송된 모든 데이터는 사용자의 Unity 카탈로그 권한을 존중합니다. 예를 들어 사용자에게 볼 수 있는 권한이 없는 테이블과 관련된 메타데이터는 보내지 않습니다.

데이터가 저장되는 위치는 어디인가요?

Databricks Assistant 채팅 기록은 전자 필기장과 함께 컨트롤 플레인 데이터베이스에 저장됩니다. 컨트롤 플레인 데이터베이스는 AES-256비트 암호화되며 암호화 키를 제어해야 하는 고객은 Customer-Managed 키 기능을 활용할 수 있습니다.

메모

  • 다른 작업 영역 개체와 마찬가지로 Databricks Assistant 채팅 기록에 대한 보존 기간은 개체 자체의 수명 주기로 범위가 지정됩니다. 사용자가 전자 필기장을 삭제하면 30일 후에 전자 필기장과 연결된 모든 채팅 기록이 삭제됩니다.
  • 전자 필기장이 다른 사용자와 공유되는 경우 먼저 지워지지 않는 한 채팅 기록도 해당 사용자에게 표시됩니다.
  • 전자 필기장을 내보내면 채팅 기록이 함께 내보내지지 않습니다.
  • 관리자가 전자 필기장 액세스 권한이 있는 경우 전자 필기장을 열고 채팅 기록을 볼 수 있습니다.

내 모델에 대한 내 API 키를 가져오거나 내 모델을 호스트할 수 있나요?

이때는 그렇지 않습니다. Databricks Assistant는 Databricks에서 완전히 관리되고 호스팅됩니다. 도우미 기능은 기능 제공 기능(예: 함수 호출), 성능 및 품질에 따라 크게 달라집니다. Databricks는 최상의 성능을 위해 새 모델을 지속적으로 평가하고 이 기능의 이후 버전에서 모델을 업데이트할 수 있습니다.

출력 데이터는 누가 소유하나요? Assistant에서 코드를 생성하는 경우 해당 IP를 소유하는 사람은 누구인가요?

고객은 자신의 출력물을 소유합니다.

Databricks 호스팅 모델 사용을 선택 해제하기

Databricks 호스팅 모델 사용을 옵트아웃하려면 다음을 수행합니다.

  1. Databricks 작업 영역의 위쪽 막대에서 사용자 이름을 클릭합니다.
  2. 메뉴에서 미리 보기을 선택하십시오.
  3. Databricks 호스팅 모델에서 사용 도우미를 끕니다.

미리 보기 관리에 대한 자세한 내용은 Azure Databricks 미리 보기 관리를 참조하세요.