Databricks-Certified-Professional-Data-Engineer-KR 문제 76
상위 시스템에서 변경 데이터 캡처(CDC) 로그가 생성되어 클라우드 객체 스토리지 디렉터리에 기록됩니다. 로그의 각 레코드는 변경 유형(삽입, 업데이트 또는 삭제)과 변경 후 각 필드의 값을 나타냅니다. 소스 테이블에는 pk_id 필드로 식별되는 기본 키가 있습니다.
감사 목적으로 데이터 거버넌스 팀은 소스 시스템에서 유효했던 모든 값에 대한 전체 기록을 유지하고자 합니다. 분석 목적으로는 각 레코드의 가장 최근 값만 기록하면 됩니다. 이러한 레코드를 수집하는 Databricks 작업은 한 시간에 한 번 실행되지만, 각 레코드는 한 시간 동안 여러 번 변경될 수 있습니다.
어떤 솔루션이 이러한 요구 사항을 충족합니까?
감사 목적으로 데이터 거버넌스 팀은 소스 시스템에서 유효했던 모든 값에 대한 전체 기록을 유지하고자 합니다. 분석 목적으로는 각 레코드의 가장 최근 값만 기록하면 됩니다. 이러한 레코드를 수집하는 Databricks 작업은 한 시간에 한 번 실행되지만, 각 레코드는 한 시간 동안 여러 번 변경될 수 있습니다.
어떤 솔루션이 이러한 요구 사항을 충족합니까?
Databricks-Certified-Professional-Data-Engineer-KR 문제 77
현재 플랫폼 소유자가 여러 카탈로그의 소유권을 보유하고 있으며 스토리지 자격 증명 및 외부 위치를 관리하고 있습니다. 데이터 엔지니어는 연속성을 보장하기 위해 카탈로그 소유권을 플랫폼 팀 그룹으로 이전하고, 지속적인 권한 관리를 위임하며, 델타 공유를 통해 데이터를 수신하고 공유할 수 있는 기능을 유지해야 합니다.
메타스토어 전반에 걸쳐 이러한 작업을 수행하려면 어떤 역할이 필요합니까?
메타스토어 전반에 걸쳐 이러한 작업을 수행하려면 어떤 역할이 필요합니까?
Databricks-Certified-Professional-Data-Engineer-KR 문제 78
팀의 주니어 데이터 엔지니어가 다음 코드 블록을 구현했습니다.
뷰 `new_events`에는 `events Delta` 테이블과 동일한 스키마를 가진 레코드 배치가 포함되어 있습니다. `event_id` 필드는 이 테이블의 고유 키 역할을 합니다.
이 쿼리가 실행될 때, 기존 레코드와 동일한 event_id를 가진 새 레코드는 어떻게 처리됩니까?
뷰 `new_events`에는 `events Delta` 테이블과 동일한 스키마를 가진 레코드 배치가 포함되어 있습니다. `event_id` 필드는 이 테이블의 고유 키 역할을 합니다.
이 쿼리가 실행될 때, 기존 레코드와 동일한 event_id를 가진 새 레코드는 어떻게 처리됩니까?
Databricks-Certified-Professional-Data-Engineer-KR 문제 79
데이터 엔지니어는 Databricks의 Delta 테이블이 삭제된 파일을 지속적으로 보존하도록 하는 임무를 맡았습니다.
조직의 데이터 보존 정책을 준수하기 위해 기본값인 7일 대신 15일 동안 삭제된 파일을 보존하려고 합니다. 다음 코드 조각 중 삭제된 파일의 보존 기간을 올바르게 설정하는 것은 무엇입니까?
조직의 데이터 보존 정책을 준수하기 위해 기본값인 7일 대신 15일 동안 삭제된 파일을 보존하려고 합니다. 다음 코드 조각 중 삭제된 파일의 보존 기간을 올바르게 설정하는 것은 무엇입니까?
Databricks-Certified-Professional-Data-Engineer-KR 문제 80
Databricks CLI는 job_id 매개변수를 전달하여 기존 작업을 실행하는 데 사용됩니다. 작업 실행 요청이 성공적으로 제출되었다는 응답에는 run_id 필드가 포함됩니다.
다음 중 이 항목 옆의 숫자가 나타내는 바를 설명하는 문장은 무엇입니까?
다음 중 이 항목 옆의 숫자가 나타내는 바를 설명하는 문장은 무엇입니까?