DQS(내부) 지식을 사용하여 데이터 정리

아티클
07/12/2024

적용 대상: SQL Server

이 항목에서는 DQS(Data Quality Services)에서 데이터 품질 프로젝트를 사용하여 데이터를 정리하는 방법에 대해 설명합니다. 데이터 정리는 고품질 데이터 집합에 대해 DQS에 기본 제공된 기술 자료를 사용하여 원본 데이터에서 수행됩니다. 자세한 내용은 기술 자료 빌드를 참조하세요.

데이터 정리는 정리할 데이터 원본을 식별하고 기술 자료의 필요한 도메인에 매핑하는 매핑 단계, DQS가 정리할 데이터에 기술 자료를 적용하고 원본 데이터를 변경하도록 제안/변경하는 컴퓨터 지원 정리 단계, 데이터 관리자가 데이터 변경 내용을 분석하고 데이터 변경 내용을 수락/거부할 수 있는 대화형 정리 단계와 마지막으로 정리된 데이터를 내보낼 수 있는 내보내기 단계의 네 단계로 수행됩니다. 이러한 각 프로세스는 정리 작업 마법사의 개별 페이지에서 수행되므로 여러 페이지를 앞뒤로 이동하고, 프로세스를 다시 실행하고, 특정 정리 프로세스를 닫은 후 프로세스의 같은 단계로 돌아갈 수 있습니다. DQS에서는 원본 데이터 및 정리 결과에 대한 통계를 제공하므로 정보를 바탕으로 데이터 정리에 대한 의사를 결정할 수 있습니다.

시작하기 전에

필수 조건

정리 작업에 대한 적절한 임계값을 지정해야 합니다. 이렇게 하는 방법에 대한 자세한 내용은 정리 및 일치에 대한 임계값 구성을 참조하세요.
DQS 기술 자료를 비교하려는 Data Quality Server에서 사용할 수 있어야 하며 원본 데이터를 정리합니다. 또한 기술 자료에 정리하려는 데이터 형식에 대한 지식이 포함되어야 합니다. 예를 들어 미국 주소가 포함된 원본 데이터를 정리하려는 경우 미국 주소에 대한 "고품질" 샘플 데이터에 대해 만들어진 기술 자료가 있어야 합니다.
정리할 원본 데이터가 Excel 파일 형식인 경우 Data Quality Client 컴퓨터에 Microsoft Excel이 설치되어 있어야 합니다. 그렇지 않으면 매핑 단계에서 Excel 파일을 선택할 수 없습니다. Microsoft Excel에서 만든 파일은 .xlsx, .xls 또는.csv 확장명을 가질 수 있습니다. 64비트 버전의 Excel을 사용하는 경우 Excel 2003 파일(.xls)만 지원됩니다. Excel 2007 또는 2010 파일(.xlsx)은 지원되지 않습니다. 64비트 버전의 Excel 2007 또는 2010을 사용하는 경우 파일을 .xls 파일 또는 .csv 파일로 저장하거나 32비트 버전의 Excel을 대신 설치합니다.

보안

사용 권한

데이터 정리를 수행하려면 DQS_MAIN 데이터베이스에 대한 dqs_kb_editor 또는 dqs_kb_operator 역할이 있어야 합니다.

정리 데이터 품질 프로젝트 만들기

데이터 정리 작업을 수행하려면 데이터 품질 프로젝트를 사용해야 합니다. 정리 데이터 품질 프로젝트를 만들려면 다음을 수행합니다.

데이터 품질 프로젝트 만들기항목의 1~3단계를 수행합니다.
3.d단계에서 정리 작업을 선택합니다.
만들기 를 클릭하여 정리 데이터 품질 프로젝트를 만듭니다.

이렇게 하면 정리 데이터 품질 프로젝트가 만들어지고 정리 데이터 품질 마법사의 맵 페이지가 열립니다.

매핑 단계

매핑 단계에서 정리할 원본 데이터에 대한 연결을 지정하고 원본 데이터의 열을 선택한 기술 자료의 적절한 도메인에 매핑합니다.

정리 데이터 품질 마법사의 맵 페이지에서 정리할 원본 데이터, 즉 SQL Server 또는 Excel 파일을 선택합니다.
1. SQL Server: 원본 데이터를 이 데이터베이스에 복사한 경우 DQS_STAGING_DATA 를 원본 데이터베이스로 선택한 다음 원본 데이터가 포함된 적절한 테이블/뷰를 선택합니다. 그렇지 않으면 원본 데이터베이스와 적절한 테이블/보기를 선택합니다. 원본 데이터베이스는 데이터베이스 드롭다운 목록에서 사용할 수 있도록 Data Quality Server와 동일한 SQL Server 인스턴스에 있어야 합니다.
2. Excel 파일: 찾아보기를 클릭하고 정리할 데이터가 포함된 Excel 파일을 선택합니다. Excel 파일을 선택하려면 Data Quality Client 컴퓨터에 Microsoft Excel이 설치되어 있어야 합니다. 그렇지 않으면 찾아보기 단추를 사용할 수 없으며 이 텍스트 상자 아래에 Microsoft Excel이 설치되어 있지 않다는 알림이 표시됩니다. 또한 Excel 파일의 첫 행에 머리글 데이터가 들어 있는 경우 첫 번째 행을 머리글로 사용 확인란을 선택합니다.
매핑 아래에서 원본 열 열의 드롭다운 목록에서 원본 열을 선택한 다음, 같은 행의 도메인 열에 있는 드롭다운 목록에서 도메인을 선택하여 원본 데이터의 데이터 열을 기술 자료의 적절한 도메인에 매핑합니다. 이 단계를 반복하여 원본 데이터의 모든 열을 기술 자료의 적절한 도메인에 매핑합니다. 필요한 경우 열 매핑 추가 아이콘을 클릭하여 매핑 테이블에 행을 추가할 수 있습니다.

참고 항목

원본 데이터 형식이 DQS에서 지원되고 DQS 도메인 데이터 형식과 일치하는 경우에만 데이터 정리를 수행하기 위해 원본 데이터를 DQS 도메인에 매핑할 수 있습니다. 지원되는 원본 데이터 형식에 대한 자세한 내용은 DQS 도메인에 대해 지원되는 SQL Server 및 SSIS 데이터 형식을 참조하세요.
데이터 원본 미리 보기 아이콘을 클릭하여 선택한 SQL Server 테이블 또는 보기 또는 선택한 Excel 워크시트의 데이터를 확인합니다.
복합 도메인 보기/선택 을 클릭하여 원본 열에 매핑된 복합 도메인 목록을 확인합니다. 이 단추는 원본 열에 매핑된 복합 도메인이 하나 이상 있는 경우에만 사용할 수 있습니다.
다음을 클릭하여 컴퓨터 지원 정리 단계(정리 페이지)로 이동합니다.

컴퓨터 기반 정리 단계

컴퓨터 지원 정리 단계에서는 기술 자료의 매핑된 도메인에 대해 원본 데이터를 분석하고 데이터 변경 내용을 만들거나 제안하는 자동화된 데이터 정리 프로세스를 실행합니다.

데이터 품질 마법사의 정리 페이지에서 시작을 클릭하여 컴퓨터 지원 정리 프로세스를 실행합니다. DQS는 지정된 임계값 수준에 따라 고급 알고리즘 및 신뢰 수준을 사용하여 선택한 기술 자료에 대해 데이터를 분석한 다음, 정리합니다. DQS에서 컴퓨터 기반 정리가 실행되는 방법은 데이터 정리에서 컴퓨터 기반 정리를 참조하세요.
Important
- 데이터 분석이 완료되면 시작 단추가 다시 시작 단추로 바뀝니다. 그러나 이전 분석 결과가 아직 저장되지 않은 경우 다시 시작 을 클릭하면 이전 데이터가 손실됩니다. 분석이 실행 중일 때는 페이지에서 나가지 마세요. 그러면 분석 프로세스가 종료됩니다.
- 정리 프로젝트에 사용된 기술 자료가 정리 프로젝트를 만든 후 업데이트되고 게시된 경우 시작을 클릭하면 정리에 최신 기술 자료를 사용할지 여부를 묻는 메시지가 표시됩니다. 일반적으로 기술 자료를 사용하여 데이터 품질 프로젝트를 만들고, 닫기를 클릭하여 중간에 정리 프로젝트를 닫은 다음, 나중에 데이터 품질 프로젝트를 다시 열어 정리를 수행하는 경우에 발생할 수 있습니다. 그 동안 정리 프로젝트에 사용된 기술 자료가 업데이트 및 게시되었습니다.
  
  마찬가지로 정리 프로젝트에 사용된 기술 자료가 마지막으로 컴퓨터 지원 정리를 실행한 후 업데이트되고 게시된 경우 다시 시작을 클릭하면 정리에 최신 기술 자료를 사용할지 여부를 묻는 메시지가 표시됩니다.
  
  두 경우 모두 예를 클릭하여 컴퓨터 지원 정리에 업데이트된 기술 자료를 사용합니다. 또한 현재 매핑과 업데이트된 기술 자료(예: 도메인이 삭제되었거나 도메인 데이터 형식이 변경됨) 간에 충돌이 있는 경우 업데이트된 기술 자료를 사용하도록 현재 매핑을 수정하라는 메시지가 표시됩니다. 예를 클릭하면 컴퓨터 지원 정리를 계속하기 전에 매핑을 수정할 수 있는 맵 페이지로 이동합니다.
컴퓨터 지원 정리 단계에서 프로파일러 탭을 클릭하여 프로파일러를 전환하여 실시간 데이터 프로파일링 및 알림을 볼 수 있습니다. 자세한 내용은 프로파일러 통계를 참조하세요.
결과에 만족하지 않는 경우 뒤로를 클릭하여 맵 페이지로 돌아가서 필요에 따라 하나 이상의 매핑을 수정하고 정리 페이지로 돌아간 다음, 다시 시작을 클릭합니다.
컴퓨터 지원 정리 프로세스가 완료되면 다음을 클릭하여 대화형 정리 단계(결과 관리 및 보기 페이지)로 이동합니다.

대화형 정리 단계

대화형 정리 단계에서는 DQS가 제안한 변경 내용을 확인하고 변경 내용을 승인하거나 거부하여 구현 여부를 결정할 수 있습니다. 결과 관리 및 보기 페이지의 왼쪽 창에 DQS는 컴퓨터 지원 정리 단계에서 각 도메인에 대해 분석된 원본 데이터의 값 수와 함께 매핑 단계에서 이전에 매핑한 모든 도메인의 목록을 표시합니다. 도메인 규칙, 구문 오류 규칙 및 고급 알고리즘 준수에 따라 결과 관리 및 보기 페이지의 오른쪽 창에서 DQS는 신뢰 수준을 사용하여 5개의 탭 아래에 데이터를 분류합니다. 신뢰도 수준은 수정 또는 제안에 대한 DQS의 확신도를 나타내며, 다음 임계값을 기반으로 합니다.

자동 수정 임계값: 이 임계값을 초과하는 신뢰 수준이 있는 모든 값은 DQS에서 자동으로 수정됩니다. 그러나 데이터 관리자는 대화형 정리 중에 변경 사항을 재정의할 수 있습니다. 구성 화면의 일반 설정 탭에서 자동 수정 임계값을 지정할 수 있습니다. 자세한 내용은 정리 및 일치에 대한 임계값 구성을 참조하세요.
자동 제안 임계값: 신뢰 수준이 이 임계값을 초과하지만 자동 수정 임계값보다 낮은 값은 대체 값으로 제안됩니다. DQS는 데이터 관리자가 승인하는 경우에만 변경합니다. 구성 화면의 일반 설정 탭에서 자동 제안 임계값을 지정할 수 있습니다. 자세한 내용은 정리 및 일치에 대한 임계값 구성을 참조하세요.
기타: 자동 제안 임계값보다 낮은 모든 값이 DQS에 의해 변경되지 않고 유지됩니다.

신뢰 수준에 따라 값은 다음 5개의 탭 아래에 표시됩니다.

탭	설명
제안됨	DQS가 신뢰 수준이 자동 제안 임계값보다 높지만 자동 수정 임계값보다 낮은 제안 값을 찾은 도메인 값을 표시합니다. 제안 값은 원래 값에 대해 다음으로 수정 열에 표시됩니다. 위쪽 표의 값에 대해 승인 또는 거부 열의 라디오 단추를 클릭하여 값의 모든 인스턴스에 대한 제안을 수락하거나 거부할 수 있습니다. 이 경우 허용되는 값은 수정됨 탭으로 이동하고 거부된 값은 잘못됨 탭으로 이동합니다.
New	DQS에 충분한 정보가 없으므로 다른 탭에 매핑할 수 없는 유효한 도메인을 표시합니다. 또한 이 탭에는 신뢰 수준이 자동 제안 임계값보다 작지만 유효한 것으로 표시될 만큼 충분히 높은 값도 포함됩니다. 값이 올바르다고 생각되면 승인 열에서 라디오 단추를 클릭합니다. 그렇지 않으면 거부 열에서 라디오 단추를 클릭합니다. 허용되는 값이 Correct 탭으로 이동하고 거부된 값이 잘못됨 탭으로 이동합니다. 올바른 값을 값에 대해 다음으로 수정 열의 원래 값 대신 수동으로 입력한 다음, 승인 열의 라디오 단추를 클릭하여 변경 내용을 적용할 수도 있습니다. 이 경우 값은 수정됨 탭으로 이동합니다.
잘못됨	기술 자료의 도메인에서 유효하지 않은 것으로 표시된 도메인 값 또는 도메인 규칙을 준수하지 않은 값을 표시합니다. 이 탭에는 다른 4개의 탭에서 사용자가 거부한 값도 포함됩니다. 그러나 값이 올바르다고 생각되면 승인 열에서 라디오 단추를 클릭합니다. 허용되는 값이 Correct 탭으로 이동합니다. 올바른 값을 값에 대해 다음으로 수정 열의 원래 값 대신 수동으로 입력한 다음, 승인 열의 라디오 단추를 클릭하여 변경 내용을 적용할 수도 있습니다. 이 경우 값은 수정됨 탭으로 이동합니다.
수정됨	DQS가 자동 수정 임계값을 초과하는 신뢰 수준의 값에 대한 수정을 찾았기 때문에 자동화된 정리 프로세스 중에 DQS에서 수정한 도메인 값을 표시합니다. 수정된 값은 원래 값에 대해 다음으로 수정 열에 표시됩니다. 기본적으로 값에 대한 승인 열의 라디오 단추가 선택됩니다. 필요한 경우 거부 열의 라디오 단추를 클릭해 제안된 수정을 거부하여 해당 값을 잘못됨 탭으로 이동하거나, 다음으로 수정 열에 올바른 값을 직접 입력한 다음 승인 열의 라디오 단추를 클릭하여 변경 내용을 적용하고 해당 값을 수정됨 탭으로 이동할 수 있습니다.
올바름	올바른 도메인 값을 표시합니다. 예를 들어 값이 도메인 값과 일치했습니다. 이 탭에는 신규 및 잘못됨 탭의 승인 열에서 라디오 단추를 클릭하여 사용자가 승인한 값도 포함됩니다. 기본적으로 승인 열의 라디오 단추가 각 값에 대해 선택됩니다. 그러나 이 탭의 값이 올바르지 않다고 생각하는 경우 값에 대해 거부 열의 라디오 단추를 클릭하여 잘못됨 탭으로 이동하거나 값에 대해 다음으로 수정 열에 값에 대한 대체로 올바른 값을 직접 입력한 다음, 승인 열의 라디오 단추를 클릭하여 변경 내용을 적용하고 해당 값을 수정됨 탭으로 이동할 수 있습니다.

대화형으로 데이터를 정리하려면 다음을 수행합니다.

정리 데이터 품질 마법사의 결과 관리 및 보기 페이지의 왼쪽 창에서 도메인 이름을 클릭합니다.
5개의 탭에서 도메인 값을 검토하고 앞에서 설명한 대로 적절한 작업을 수행합니다.
- 오른쪽 위의 창에는 선택한 도메인의 각 값에 대해 원래 값, 인스턴스(레코드) 수, 다른(올바른) 값을 지정할 수 있는 상자, 신뢰도 수준( 올바름 탭 아래의 값에는 사용할 수 없음), 값에 대해 DQS 작업이 수행된 이유, 값에 대한 수정 및 제안을 승인하거나 거부할 수 있는 옵션 등의 정보가 표시됩니다.
  
  팁
  
  모든 용어 승인 또는 모든 용어 거부 아이콘을 각각 클릭하여 오른쪽 위 창에서 선택한 도메인의 모든 값을 승인하거나 거부할 수 있습니다. 또는 선택한 도메인의 값을 마우스 오른쪽 단추로 클릭한 다음 바로 가기 메뉴에서 모두 허용 또는 모두 거부 를 클릭합니다.
- 아래쪽 창은 오른쪽 위 창에서 선택한 도메인 값의 개별 항목을 표시합니다. 표시되는 정보에는 다른(올바른) 값을 지정할 수 있는 상자, 신뢰도 수준( 올바름 탭 아래의 값에는 사용할 수 없음), 값에 대해 DQS 작업이 수행된 이유, 값에 대한 수정 및 제안을 승인하거나 거부할 수 있는 옵션, 원래 값 등이 있습니다.
도메인을 만드는 동안 맞춤법 검사기 기능을 사용하도록 설정한 경우 잠재적 오류로 식별되는 이러한 도메인 값에 대해 물결 모양의 빨간색 밑줄이 표시됩니다. 밑줄은 전체 값에 대해 표시됩니다. 예를 들어 "New York"의 철자가 "Neu York"인 경우 맞춤법 검사기는 "Neu"뿐만 아니라 "Neu York" 아래에 빨간색 밑줄을 표시합니다. 값을 마우스 오른쪽 단추로 클릭하면 제안된 수정 사항이 표시됩니다. 5개 이상의 제안이 있는 경우 컨텍스트 메뉴에서 추가 제안을 클릭하여 나머지 제안을 볼 수 있습니다. 오류 표시와 마찬가지로 제안 사항은 전체 값을 대체합니다. 예를 들어 "New"가 아니라 이전 예제에서 "New York"이 제안으로 표시됩니다. 제안 중 하나를 선택하거나 해당 값에 대해 표시된 사전에 값을 추가할 수 있습니다. 값은 사용자 계정 수준에서 사전에 저장됩니다. 맞춤법 검사기 컨텍스트 메뉴에서 제안을 선택하면 선택한 제안이 다음으로 수정 열에 추가됩니다. 그러나 다음으로 수정 열에서 제안을 선택하면 열의 값이 선택한 제안으로 대체됩니다.

맞춤법 검사기 기능은 대화형 정리 단계에서 기본적으로 사용하도록 설정됩니다. 맞춤법 검사기 사용/사용 안 함 아이콘을 클릭하거나 도메인 값 영역을 마우스 오른쪽 단추로 클릭한 다음, 바로 가기 메뉴에서 맞춤법 검사기를 클릭하여 대화형 정리 단계에서 맞춤법 검사기를 사용하지 않도록 설정할 수 있습니다. 다시 사용하도록 설정하려면 동일한 작업을 수행합니다.

참고 항목

맞춤법 검사기 기능은 위쪽 창(도메인 값)에서만 사용할 수 있습니다. 또한 복합 도메인에 대해 맞춤법 검사기를 사용하거나 사용하지 않도록 설정할 수 없습니다. 복합 도메인에서 맞춤법 검사기 기능이 설정된 문자열 형식의 하위 도메인에는 기본적으로 대화형 정리 단계에서 맞춤법 검사기 기능이 설정됩니다.
대화형 정리 단계에서 프로파일러 탭을 클릭하여 프로파일러를 전환하여 실시간 데이터 프로파일링 및 알림을 볼 수 있습니다. 자세한 내용은 프로파일러 통계를 참조하세요.
모든 도메인 값을 검토한 후 다음을 클릭하여 내보내기 단계를 진행합니다.

내보내기 단계

내보내기 단계에서 정리된 데이터를 내보내기 위한 매개 변수를 지정합니다. 내보낼 대상과 위치입니다.

정리 데이터 품질 마법사의 내보내기 페이지에서 정리한 데이터를 내보낼 대상 유형을 선택합니다. SQL Server, CSV 파일 또는 Excel 파일입니다.

Important

64비트 버전의 Excel을 사용하는 경우 정리된 데이터를 Excel 파일로 내보낼 수 없습니다. SQL Server 데이터베이스 또는 .csv 파일로만 내보낼 수 있습니다.
1. SQL Server: 여기에서 데이터를 내보내려면 대상 데이터베이스로 DQS_STAGING_DATA를 선택한 다음, 내보낸 데이터를 저장하기 위해 만들 테이블 이름을 지정합니다. 그렇지 않은 경우 다른 데이터베이스로 데이터를 내보내려면 다른 데이터베이스를 선택한 다음, 내보낸 데이터를 저장하기 위해 만들 테이블 이름을 지정합니다. 대상 데이터베이스는 데이터베이스 드롭다운 목록에서 사용할 수 있도록 Data Quality Server와 동일한 SQL Server 인스턴스에 있어야 합니다.
2. CSV 파일: 찾아보기를 클릭하고 정리한 데이터를 내보낼 .csv 파일의 이름과 위치를 지정합니다. 정리된 데이터를 내보낼 전체 경로와 함께 .csv 파일의 파일 이름을 입력할 수도 있습니다. 예를 들어 "c:\ExportedData.csv"를 입력합니다. 파일은 Data Quality Server가 설치된 컴퓨터에 저장됩니다.
3. Excel 파일: 찾아보기를 클릭하고 정리한 데이터를 내보낼 Excel 파일의 이름과 위치를 지정합니다. 정리된 데이터를 내보낼 전체 경로와 함께 Excel 파일의 파일 이름을 입력할 수도 있습니다. 예를 들어 "c:\ExportedData.xlsx"를 입력합니다. 파일은 Data Quality Server가 설치된 컴퓨터에 저장됩니다.
표준화 출력 확인란을 선택하여 도메인에 대해 선택한 출력 형식에 따라 출력을 표준화합니다. 예를 들어, 문자열 값을 대문자로 변경하거나 단어의 첫 글자를 대문자로 지정합니다. 도메인의 출력 형식을 지정하는 방법은 도메인 속성 설정에서 Format Output to 목록을 참조하세요.
다음으로 데이터 출력을 선택합니다. 정리된 데이터만 내보내거나 정리 정보와 함께 정리된 데이터를 내보냅니다.
- 데이터만: 라디오 단추를 클릭하여 정리된 데이터만 내보냅니다.
- 데이터 및 정리 정보: 각 도메인에 대해 다음 데이터를 내보내려면 이 라디오 단추를 클릭합니다.
  - <Domain>_Source: 도메인의 원래 값입니다.
  - <Domain>_Output: 도메인의 정리된 값입니다.
  - <도메인>_Reason: 값을 수정하기 위해 지정된 이유입니다.
  - <Domain>_Confidence: 수정된 모든 용어에 대한 신뢰 수준입니다. 신뢰도는 해당 백분율 값과 동일한 10진수 값으로 표시됩니다. 예를 들어 신뢰 수준이 95%이면 .9500000으로 표시됩니다.
  - <도메인>_Status: 데이터 정리 후 도메인 값의 상태입니다. 예를 들어 제안됨, 신규, 잘못됨, 수정됨 또는 Correct입니다.
  - 레코드 상태: 매핑된 도메인별 상태 필드(<DomainName>_Status)와 별도로 레코드 상태 필드에는 레코드에 대한 상태가 표시됩니다. 레코드에 있는 도메인의 상태가 신규 또는 Correct이면 레코드 상태가 Correct로 설정됩니다. 레코드의 도메인 상태가 제안됨, 잘못됨 또는 수정됨인 경우 레코드 상태는 해당 값으로 설정됩니다. 예를 들어 레코드의 도메인 상태가 제안인 경우 레코드 상태는 제안으로 설정됩니다.
    
    참고 항목
    
    정리 작업에 참조 데이터 서비스를 사용하는 경우 도메인 값에 대한 몇 가지 추가 데이터도 내보낼 수 있습니다. 자세한 내용은 참조 데이터(외부) 기술 자료를 사용하여 데이터 정리를 참조하세요.
내보내기를 클릭하여 선택한 데이터 대상으로 데이터를 내보냅니다. 다음을 선택한 경우:
- SQL Server를 데이터 대상으로 선택한 경우 지정한 이름의 새 테이블이 선택한 데이터베이스에서 만들어집니다.
- CSV 파일을 데이터 대상으로 선택한 경우 CSV 파일 이름 상자에서 이전에 지정한 파일 이름으로 Data Quality Server 컴퓨터의 위치에 .csv 파일이 만들어집니다.
- Excel 파일을 데이터 대상으로 선택한 경우 Excel 파일 이름 상자에서 이전에 지정한 파일 이름으로 Data Quality Server 컴퓨터의 위치에 Excel 파일이 만들어집니다.
마침을 클릭하여 데이터 품질 프로젝트를 닫습니다.

프로파일러 통계

프로파일러 탭은 원본 데이터의 품질을 나타내는 통계를 제공합니다. 프로파일링을 통해 데이터 정리 작업의 효과를 평가하여 잠재적으로 데이터 정리로 데이터의 품질을 개선할 수 있는 정도를 확인할 수 있습니다.

프로파일러 탭에서는 원본 데이터에 대해 필드 및 도메인별로 다음과 같은 통계를 제공합니다.

레코드: 데이터 정리 작업에 대해 분석된 데이터 샘플의 레코드 수
올바른 레코드: 올바른 것으로 확인된 레코드 수
수정된 레코드: 수정된 레코드 수
제안된 레코드: 제안된 레코드 수
잘못된 레코드: 유효하지 않은 레코드 수

필드 통계에는 다음이 포함됩니다.

필드: 원본 데이터의 필드 이름
도메인: 필드에 매핑된 도메인의 이름
수정된 값: 수정된 도메인 값 수
제안된 값: 제안된 도메인 값 수
완전성: 정리 작업에 매핑된 각 원본 필드의 완전성
정확도: 정리 작업을 위해 매핑된 각 원본 필드의 정확도

DQS 프로파일링에서는 완결성(데이터가 존재하는 정도)과 정확도(데이터를 의도된 용도에 맞게 사용할 수 있는 정도)의 두 가지 데이터 품질 차원을 제공합니다. 프로파일링에서 필드가 상대적으로 불완전하다고 말하는 경우 데이터 품질 프로젝트의 기술 자료에서 제거할 수 있습니다. 프로파일링은 복합 도메인에 대한 신뢰할 수 있는 완전성 통계를 제공하지 않을 수 있습니다. 완전성 통계가 필요한 경우 복합 도메인 대신 단일 도메인을 사용합니다. 복합 도메인을 사용하려는 경우 프로파일링을 위해 단일 도메인을 사용하여 하나의 기술 자료를 만들고 완전성을 확인하고 정리 프로세스에 대한 복합 도메인을 사용하여 다른 도메인을 만들 수 있습니다. 예를 들어 프로파일링은 복합 도메인을 사용하는 주소 레코드에 대해 95%의 완전성을 표시할 수 있지만 우편 번호 열과 같은 열 중 하나에 대해 훨씬 더 높은 수준의 불완전성이 있을 수 있습니다. 이 예제에서는 단일 도메인을 사용하여 우편 번호 열의 완전성을 측정할 수 있습니다. 프로파일링은 여러 열에 대한 정확도를 함께 측정할 수 있으므로 복합 도메인에 대해 신뢰할 수 있는 정확도 통계를 제공할 수 있습니다. 이 데이터의 값은 복합 집계에 있으므로 복합 도메인을 사용하여 정확도를 측정할 수 있습니다.

참조 데이터 서비스를 사용하지 않는 경우에는 정확도 통계를 보다 면밀히 해석해야 할 수 있습니다. 데이터 정리에 참조 데이터 서비스를 사용하는 경우 정확도 통계에 대한 신뢰 수준이 있습니다. 참조 데이터 서비스를 사용한 데이터 정리에 대한 자세한 내용은 참조 데이터(외부) 지식을 사용하여 데이터 정리를 참조하세요.

정리 알림

다음 조건으로 인해 알림이 발생합니다.

필드에 대한 수정 또는 제안은 없습니다. 매핑에서 제거하거나 지식 검색을 먼저 실행하거나 다른 기술 자료를 사용할 수 있습니다.
필드에 대한 수정 또는 제안은 비교적 적습니다. 매핑에서 제거하거나 지식 검색을 먼저 실행하거나 다른 기술 자료를 사용할 수 있습니다.
필드의 정확도 수준이 매우 낮습니다. 매핑을 확인하거나 먼저 지식 검색을 실행하는 것이 좋습니다.

프로파일링에 대한 자세한 내용은 DQS의 데이터 프로파일링 및 알림을 참조하세요.

다음을 통해 공유