Azure Synapse Analytics의 Apache Spark 진단 로그

Azure Synapse Analytics 작업 영역의 Apache Spark 풀과 관련된 문제를 해결하기 위해 Microsoft 지원 및 Azure Synapse Analytics 엔지니어링 팀은 Apache Spark 풀과 연결된 진단 로그를 보고 다운로드할 수 있습니다. Microsoft는 지원 인시던트 해결을 위해 로그 데이터의 임시 복사본에 액세스하거나 만들 수 있습니다.

문제 해결을 위해 수집된 로그

다음 표에는 지원 인시던트 문제를 해결하기 위해 수집될 로그 데이터가 나와 있습니다. 또한 Synapse Studio를 사용하여 Apache Spark 풀에서 동일한 형식의 데이터를 제공하라는 메시지가 표시될 수 있습니다.

Type	설명
Apache Spark 드라이버 로그	Spark 드라이버 프로그램은 클러스터 관리자와 리소스를 협상하고 작업 실행을 예약하는 데 사용되는 중요한 프로세스입니다. 드라이버 로그에는 작업이 실행된 방법 및 사용된 리소스에 대한 세부 정보가 포함됩니다. 이 정보는 Spark 애플리케이션 문제를 해결하는 데 중요합니다.
Apache Spark 실행기 로그	Spark 실행기는 지정된 Spark 작업에서 개별 작업을 실행하는 작업자 노드 관련 프로세스입니다. Spark 애플리케이션의 시작 부분에서 시작되며 일반적으로 애플리케이션의 전체 수명 동안 실행됩니다. Spark 실행기가 작업을 실행한 후 결과를 드라이버 애플리케이션으로 보냅니다. 실행기 로그에는 애플리케이션의 개별 작업이 수행된 방식 및 실패한 작업이 있는지 여부에 대한 세부 정보가 포함되어 있습니다.
Apache Spark 이벤트 로그	Spark 이벤트 로그에는 모든 실행기의 실행 관련 및 성능 관련 메트릭이 포함됩니다. 스케줄러 단계 및 작업 목록과 실행 환경 정보도 포함됩니다.

도움을 요청하십시오.

질문이 있거나 도움이 필요한 경우 지원 요청을 생성하거나Azure 커뮤니티 지원에 문의하세요. Azure 피드백 커뮤니티에 제품 피드백을 제출할 수도 있습니다.