Azure Monitor를 사용하여 SSIS 작업 모니터링
참고 항목
Azure Synapse Pipelines가 아닌 Azure Data Factory의 Azure Monitor를 사용하여 SSIS 작업만 모니터링할 수 있습니다.
SSIS 워크로드를 리프트 앤 시프트하려면 다음을 지원하는 ADF에서 SSIS IR을 프로비전합니다.
- Azure SQL Database 서버/Managed Instance(프로젝트 배포 모델)가 호스트하는 SSIS 카탈로그(SSISDB)에 배포된 패키지 실행
- Azure SQL Managed Instance(패키지 배포 모델)가 호스트하는 파일 시스템, Azure Files 또는 SQL Server 데이터베이스(MSDB)에 배포된 패키지 실행
프로비전된 후에는 Azure PowerShell을 사용하거나 ADF 포털의 모니터 허브에서 SSIS IR 운영 상태를 확인할 수 있습니다. 프로젝트 배포 모델을 사용하면 SSIS 패키지 실행 로그가 SSISDB 내부 테이블 또는 뷰에 저장되므로 SSMS와 같은 지정된 도구를 사용하여 해당 로그를 쿼리, 분석 및 시각적으로 표현할 수 있습니다. 패키지 배포 모델을 사용하면 SSIS 패키지 실행 로그를 파일 시스템 또는 Azure Files에 CSV 파일로 저장할 수 있습니다. 이 로그는 다른 지정된 도구를 사용하여 구문 분석하고 처리한 후에야 쿼리, 분석 및 시각적 표현이 가능합니다.
이제는 Azure Monitor 통합을 통해, Azure Portal의 SSIS IR 작업 및 SSIS 패키지 실행에서 생성된 모든 메트릭 및 로그를 쿼리, 분석 및 시각적으로 표현할 수 있습니다. 또한 경고를 발생시킬 수도 있습니다.
SSIS 작업을 위한 진단 설정 및 작업 영역 구성
SSIS IR 작업 및 SSIS 패키지 실행에서 생성된 모든 메트릭과 로그를 Azure Monitor로 보내려면 ADF에 대한 진단 설정 및 작업 영역을 구성해야 합니다.
SSIS 운영 메트릭
SSIS 운영 메트릭은 SSIS IR 시작 및 중지 작업의 상태는 물론 특정 시점의 SSIS 패키지 실행을 설명하는 성능 카운터 또는 숫자 값입니다. Azure Monitor 메트릭의 일부입니다.
Azure Monitor에서 ADF에 대한 진단 설정 및 작업 영역을 구성할 때 AllMetrics 확인란을 선택하면 SSIS 운영 메트릭을 Azure Metrics Explorer를 사용한 대화형 분석, Azure 대시보드의 프레젠테이션 및 근 실시간 경고에 사용할 수 있습니다.
SSIS 운영 경고
ADF 포털에서 SSIS 운영 메트릭에 대한 경고를 발생시키려면 ADF 모니터 허브의 경고 및 메트릭 페이지를 선택하고 제공된 단계별 지침을 따릅니다.
Azure Portal에서 SSIS 운영 메트릭에 대한 경고를 발생시키려면 Azure 모니터 허브의 경고 페이지를 선택하고 제공된 단계별 지침을 따릅니다.
SSIS 운영 로그
SSIS 운영 로그는 SSIS IR 운영 및 SSIS 패키지 실행에 의해 생성되는 이벤트이며, 식별된 문제에 대한 충분한 컨텍스트를 제공하고 근본 원인을 분석하는 데 유용합니다.
Azure Monitor에서 ADF에 대한 진단 설정 및 작업 영역을 구성할 때 관련 SSIS 운영 로그를 선택하여 Azure Data Explorer를 기반으로 하는 Log Analytics에 보낼 수 있습니다. 여기에서 풍부한 쿼리 언어를 사용한 분석, Azure 대시보드의 프레젠테이션 및 근 실시간 경고에 사용할 수 있습니다.
Azure Monitor 및 Log Analytics에서 SSIS 패키지 실행 로그의 스키마 및 콘텐츠는 SSISDB 내부 테이블 또는 뷰의 스키마와 비슷합니다.
| Azure Monitor 로그 범주 | Log Analytics 테이블 | SSISDB 내부 테이블/뷰 |
|---|---|---|
SSISIntegrationRuntimeLogs |
ADFSSISIntegrationRuntimeLogs |
|
SSISPackageEventMessageContext |
ADFSSISPackageEventMessageContext |
[internal].[event_message_context] |
SSISPackageEventMessages |
ADFSSISPackageEventMessages |
[internal].[event_messages] |
SSISPackageExecutableStatistics |
ADFSSISPackageExecutableStatistics |
[internal].[executable_statistics] |
SSISPackageExecutionComponentPhases |
ADFSSISPackageExecutionComponentPhases |
[internal].[execution_component_phases] |
SSISPackageExecutionDataStatistics |
ADFSSISPackageExecutionDataStatistics |
[internal].[execution_data_statistics] |
SSIS 운영 로그 특성/속성에 관한 자세한 내용은 리소스 로그를 참조하세요.
선택한 SSIS 패키지 실행 로그는 호출 메서드에 관계 없이 항상 Log Analytics로 전송됩니다. 예를 들어, Azure 지원 SSDT에서 패키지 실행은 SSMS, SQL Server 에이전트 또는 기타 지정된 도구의 T-SQL을 통해, ADF 파이프라인에서 SSIS 패키지 실행 활동의 트리거된 실행 또는 디버그 실행으로 호출할 수 있습니다.
Logs Analytics에서 SSIS IR 작업 로그를 쿼리할 때는 각각 Start/Stop/Maintenance/Heartbeat 및 Started/InProgress/Succeeded/Failed/Healthy/Unhealthy로 설정 된 OperationName 및 ResultType 속성을 사용할 수 있습니다.
SSIS IR 노드 상태를 쿼리하려면 OperationName 속성을 Heartbeat로 설정하면 됩니다. 각 노드는 일반적으로 상태를 반영하는 ResultType 속성을 사용하여 분당 하나의 Heartbeat 레코드를 Log Analytics에 보냅니다. 이 속성은 패키지 실행에 사용할 수 있는 경우 Healthy이고 그렇지 않은 경우 Unhealthy입니다. 예를 들어 SSIS IR에 사용 가능한 노드가 2개 있는 경우 1분 이내에 ResultType 속성이 Healthy로 설정된 Heartbeat 레코드 2개가 항상 표시됩니다.
다음 패턴을 쿼리하여 SSIS IR 노드의 비활성을 검색할 수 있습니다.
- SSIS IR이 아직 실행되고 있는 경우에는 1분 동안 누락된
Heartbeat레코드가 있습니다. - SSIS IR이 아직 실행되고 있는 경우에는 1분 동안 ResultType 속성이
Unhealthy로 설정된Heartbeat레코드가 있습니다.
위의 쿼리를 경고로 전환하고 SSIS IR 모니터링 페이지로 이동하여 해당 경고를 받은 시기를 확인할 수 있습니다.
Logs Analytics에서 SSIS 패키지 실행 로그를 쿼리할 때 OperationId/ExecutionId/CorrelationId 속성을 사용하여 조인할 수 있습니다. OperationId/ExecutionId는 SSISDB에 저장되지 않은/T-SQL을 통해 호출된 패키지와 관련된 모든 작업/실행에 대해 항상 1로 설정됩니다.
