다음을 통해 공유

Azure Data Factory 또는 Synapse Analytics를 사용하여 Vertica에서 데이터 복사

  • 아티클

적용 대상: Azure Data Factory Azure Synapse Analytics

팁

기업용 올인원 분석 솔루션인 Microsoft Fabric의 Data Factory를 사용해 보세요. Microsoft Fabric은 데이터 이동부터 데이터 과학, 실시간 분석, 비즈니스 인텔리전스 및 보고에 이르기까지 모든 것을 다룹니다. 무료로 새 평가판을 시작하는 방법을 알아봅니다!

이 문서에서는 Azure Data Factory 또는 Synapse Analytics 파이프라인에서 복사 작업을 사용하여 Vertica에서 데이터를 복사하는 방법을 간략하게 설명합니다. 이 문서는 복사 작업에 대한 일반적인 개요를 제공하는 복사 작업 개요 문서를 기반으로 합니다.

지원되는 기능

이 Vertica 커넥터는 다음 기능에 대해 지원됩니다.

지원되는 기능 IR
복사 작업(원본/-) ①(1.0 버전만 해당) ②
조회 작업 ①(1.0 버전만 해당) ②

① Azure 통합 런타임 ② 자체 호스팅 통합 런타임

복사 작업의 원본/싱크로 지원되는 데이터 저장소 목록은 지원되는 데이터 저장소 표를 참조하세요.

이 서비스는 연결을 사용하는 기본 제공 드라이버를 제공합니다. 따라서 이 커넥터를 사용하여 드라이버를 수동으로 설치하지 않아도 됩니다.

버전 2.0(미리 보기)의 경우 수동으로 Vertica ODBC 드라이버를 설치해야 합니다. 버전 1.0의 경우, 서비스가 연결을 사용하도록 설정하는 기본 제공 드라이버를 제공하므로 드라이버를 수동으로 설치할 필요가 없습니다.

필수 조건

데이터 저장소가 온-프레미스 네트워크, Azure 가상 네트워크 또는 Amazon Virtual Private Cloud 내에 있는 경우 자체 호스팅된 통합 런타임을 구성하여 연결해야 합니다. 버전 2.0(미리 보기)을 사용하는 경우 자체 호스팅 통합 런타임 버전은 5.44.8984.1 이상이어야 합니다.

Data Factory에서 지원하는 네트워크 보안 메커니즘 및 옵션에 대한 자세한 내용은 데이터 액세스 전략을 참조하세요.

버전 1.0의 경우

데이터 저장소가 관리형 클라우드 데이터 서비스인 경우 Azure Integration Runtime을 사용할 수 있습니다. 액세스가 방화벽 규칙에서 승인된 IP로 제한되는 경우 허용 목록에 Azure Integration Runtime IP를 추가할 수 있습니다.

또한 Azure Data Factory의 관리형 가상 네트워크 통합 런타임 기능을 사용하면 자체 호스팅 통합 런타임을 설치하고 구성하지 않고도 온-프레미스 네트워크에 액세스할 수 있습니다.

Vertica ODBC 드라이버 버전 2.0(미리 보기) 설치

Vertica 커넥터를 버전 2.0(미리 보기)과 함께 사용하려면 다음 단계에 따라 자체 호스팅 통합 런타임을 실행하는 컴퓨터에 Vertica ODBC 드라이버를 설치합니다.

  1. 클라이언트 드라이버 | OpenText™ Vertica™에서 ODBC 드라이버용 Vertica 클라이언트 설치를 다운로드합니다. 예를 들어, Windows 시스템 설정을 살펴보겠습니다.

    Windows 시스템 설정 예의 스크린샷.

  2. 다운로드한 .exe 파일을 열어 설치 프로세스를 시작합니다. 

    설치 프로세스의 스크린샷.

  3. Vertica 구성 요소 목록에서 ODBC 드라이버를 선택하고 다음을 선택하여 설치를 시작합니다.

    ODBC 드라이버를 선택하는 것을 보여 주는 스크린샷.

  4. 설치 프로세스가 성공적으로 완료되면 시작 - > ODBC 데이터 원본 관리자로 가서 설치가 성공적으로 완료되었는지 확인할 수 있습니다.

    성공적인 설치를 확인하는 것을 보여 주는 스크린샷.

시작

.NET SDK, Python SDK, Azure PowerShell, REST API 또는 Azure Resource Manager 템플릿을 사용하여 복사 작업으로 파이프라인을 만들 수 있습니다. 복사 작업을 사용하여 파이프라인을 만드는 단계별 지침은 복사 작업 자습서를 참조하세요.

UI를 사용하여 Vertica에 연결된 서비스 만들기

다음 단계를 사용하여 Azure Portal UI에서 Vertica에 연결된 서비스를 만듭니다.

  1. Azure Data Factory 또는 Synapse 작업 영역에서 관리 탭으로 이동하여 연결된 서비스를 선택하고 새로 만들기를 클릭합니다.

  2. Vertica를 검색하고 Vertica 커넥터를 선택합니다.

    Vertica 커넥터의 스크린샷.

  3. 서비스 세부 정보를 구성하고, 연결을 테스트하고, 새로운 연결된 서비스를 만듭니다.

    Vertica의 연결된 서비스 구성 스크린샷.

커넥터 구성 세부 정보

다음 섹션에서는 Vertica 커넥터에 한정된 Data Factory 엔터티를 정의하는 데 사용되는 속성에 대해 자세히 설명합니다.

연결된 서비스 속성

버전 2.0(미리 보기)을 사용하는 경우 Vertica 연결 서비스에 대해 다음 속성이 지원됩니다.

속성 설명 필수
type 형식 속성은 Vertica로 설정되어야 합니다. 예
server 연결하려는 서버의 이름이나 IP 주소. 예
port 서버수신기의 포트 번호. 아니요, 기본값은 5433입니다.
database Vertica 데이터베이스의 이름. 예
uid 데이터베이스에 연결하는 데 사용되는 사용자 ID. 예
pwd 애플리케이션이 데이터베이스에 연결하는 데 사용하는 암호. 예
version 버전 2.0(미리 보기)을 선택한 경우의 버전. 값이 2.0입니다. 예
connectVia 데이터 저장소에 연결하는 데 사용할 Integration Runtime입니다. 필수 구성 요소 섹션에서 자세히 알아보세요. 자체 호스팅 통합 런타임만 사용할 수 있으며 버전은 5.44.8984.1 이상이어야 합니다. 아니요

예제:

{
    "name": "VerticaLinkedService",
    "properties": {
        "type": "Vertica",
        "version": "2.0",
        "typeProperties": {
            "server": "<server>",
            "port": 5433,
            "uid": "<username>",
            "database": "<database>",
            "pwd": {
                "type": "SecureString",
                "value": "<password>"
             }
        },
        "connectVia": {
            "referenceName": "<name of Integration Runtime>",
            "type": "IntegrationRuntimeReference"
        }
    }
}

예제: Azure Key Vault에 암호 저장

{
    "name": "VerticaLinkedService",
    "properties": {
        "type": "Vertica",
        "version": "2.0",
        "typeProperties": {
            "server": "<server>",
            "port": 5433,
            "uid": "<username>",
            "database": "<database>",
            "pwd": { 
                "type": "AzureKeyVaultSecret", 
                "store": { 
                    "referenceName": "<Azure Key Vault linked service name>", 
                    "type": "LinkedServiceReference" 
                }, 
                "secretName": "<secretName>" 
            }
        },
        "connectVia": {
            "referenceName": "<name of Integration Runtime>",
            "type": "IntegrationRuntimeReference"
        }
    }
}

버전 1.0을 사용하는 경우 다음 속성이 지원됩니다.

속성 설명 필수
type 형식 속성은 Vertica로 설정되어야 합니다. 예
connectionString Vertica에 연결할 ODBC 연결 문자열입니다.
Azure Key Vault에 암호를 넣고, 연결 문자열에서 pwd 구성을 끌어올 수도 있습니다. 자세한 내용은 다음 샘플 및 Azure Key Vault에 자격 증명 저장 문서를 참조하세요.		 예
connectVia 데이터 저장소에 연결하는 데 사용할 Integration Runtime입니다. 필수 구성 요소 섹션에서 자세히 알아보세요. 지정하지 않으면 기본 Azure Integration Runtime을 사용합니다. 아니요

예제:

{
    "name": "VerticaLinkedService",
    "properties": {
        "type": "Vertica",
        "typeProperties": {
            "connectionString": "Server=<server>;Port=<port>;Database=<database>;UID=<user name>;PWD=<password>"
        },
        "connectVia": {
            "referenceName": "<name of Integration Runtime>",
            "type": "IntegrationRuntimeReference"
        }
    }
}

데이터 세트 속성

데이터 세트 정의에 사용할 수 있는 섹션 및 속성의 전체 목록은 데이터 세트 문서를 참조하세요. 이 섹션에서는 Vertica 데이터 세트에서 지원하는 속성의 목록을 제공합니다.

Vertica에서 데이터를 복사하려면 데이터 세트의 형식 속성을 VerticaTable로 설정합니다. 다음과 같은 속성이 지원됩니다.

속성 설명 필수
type 데이터 세트의 type 속성을 VerticaTable로 설정해야 합니다. 예
schema(스키마) 스키마의 이름입니다. 아니요(작업 원본에서 "query"가 지정된 경우)
table 테이블 이름입니다. 아니요(작업 원본에서 "query"가 지정된 경우)

예제

{
    "name": "VerticaDataset",
    "properties": {
        "type": "VerticaTable",
        "typeProperties": {},
        "schema": [],
        "linkedServiceName": {
            "referenceName": "<Vertica linked service name>",
            "type": "LinkedServiceReference"
        }
    }
}

복사 작업 속성

작업 정의에 사용할 수 있는 섹션 및 속성의 전체 목록은 파이프라인 문서를 참조하세요. 이 섹션에서는 Vertica 원본에서 지원하는 속성의 목록을 제공합니다.

Vertica를 원본으로

Vertica에서 데이터를 복사하려면 복사 작업의 원본 형식을 VerticaSource로 설정합니다. 복사 작업 source 섹션에서 다음 속성이 지원됩니다.

속성 설명 필수
type 복사 작업 원본의 형식 속성을 VerticaSource로 설정해야 합니다. 예
query 사용자 지정 SQL 쿼리를 사용하여 데이터를 읽습니다. 예: "SELECT * FROM MyTable" 아니요(데이터 세트에 "스키마+테이블"이 지정된 경우)

예제:

"activities":[
    {
        "name": "CopyFromVertica",
        "type": "Copy",
        "inputs": [
            {
                "referenceName": "<Vertica input dataset name>",
                "type": "DatasetReference"
            }
        ],
        "outputs": [
            {
                "referenceName": "<output dataset name>",
                "type": "DatasetReference"
            }
        ],
        "typeProperties": {
            "source": {
                "type": "VerticaSource",
                "query": "SELECT * FROM MyTable"
            },
            "sink": {
                "type": "<sink type>"
            }
        }
    }
]

조회 작업 속성

속성에 대한 자세한 내용을 보려면 조회 작업을 확인하세요.

Vertica 버전 업그레이드

Vertica 버전을 업그레이드하는 데 도움이 되는 단계는 다음과 같습니다.

  1. 필수 구성 요소의 단계에 따라 Vertica ODBC 드라이버를 설치합니다.
  2. 연결된 서비스 편집 페이지에서 버전에서 2.0(미리 보기)을 선택하고 연결된 서비스 속성을 참조하여 연결된 서비스를 구성합니다.
  3. 버전 5.44.8984.1 이상의 자체 호스팅 통합 런타임을 적용합니다. Azure Integration Runtime은 버전 2.0(미리 보기)에서는 지원되지 않습니다.

관련 콘텐츠

복사 작업에서 원본 및 싱크로 지원되는 데이터 저장소 목록은 지원되는 데이터 저장소를 참조하세요.