Databricks-Certified-Professional-Data-Engineer 문제 1
업스트림 소스는 Parquet 데이터를 현재 날짜로 명명된 디렉터리에 매시간 일괄 처리로 기록합니다. 야간 일괄 처리 작업은 다음 코드를 실행하여 date 변수에 지정된 대로 전날의 모든 데이터를 수집합니다.

customer_id와 order_id 필드가 각 주문을 고유하게 식별하는 복합 키 역할을 한다고 가정합니다.
상류 시스템에서 단일 주문에 대해 몇 시간 간격으로 중복된 항목이 생성되는 경우가 있는 경우, 어떤 진술이 맞습니까?

customer_id와 order_id 필드가 각 주문을 고유하게 식별하는 복합 키 역할을 한다고 가정합니다.
상류 시스템에서 단일 주문에 대해 몇 시간 간격으로 중복된 항목이 생성되는 경우가 있는 경우, 어떤 진술이 맞습니까?
Databricks-Certified-Professional-Data-Engineer 문제 2
업스트림 시스템은 클라우드 객체 스토리지 디렉터리에 기록되는 변경 데이터 캡처(CDC) 로그를 내보내고 있습니다. 로그의 각 레코드는 변경 유형(삽입, 업데이트 또는 삭제)과 변경 후 각 필드의 값을 나타냅니다. 원본 테이블에는 fieldpk_id로 식별되는 기본 키가 있습니다.
감사 목적으로, 데이터 거버넌스 팀은 소스 시스템에서 유효했던 모든 값의 전체 기록을 유지하려고 합니다. 분석 목적으로는 각 레코드의 가장 최근 값만 기록하면 됩니다. 이러한 레코드를 수집하는 Databricks 작업은 한 시간에 한 번씩 수행되지만, 각 레코드는 한 시간 동안 여러 번 변경되었을 수 있습니다.
어떤 솔루션이 이러한 요구 사항을 충족합니까?
감사 목적으로, 데이터 거버넌스 팀은 소스 시스템에서 유효했던 모든 값의 전체 기록을 유지하려고 합니다. 분석 목적으로는 각 레코드의 가장 최근 값만 기록하면 됩니다. 이러한 레코드를 수집하는 Databricks 작업은 한 시간에 한 번씩 수행되지만, 각 레코드는 한 시간 동안 여러 번 변경되었을 수 있습니다.
어떤 솔루션이 이러한 요구 사항을 충족합니까?
Databricks-Certified-Professional-Data-Engineer 문제 3
거래 테이블은 product_id, user_id, event_date 열에 유동적으로 클러스터링되었습니다.
어떤 작업이 클러스터 쓰기에 대한 지원이 부족합니까?
어떤 작업이 클러스터 쓰기에 대한 지원이 부족합니까?
Databricks-Certified-Professional-Data-Engineer 문제 4
AUTO LOADER와 COPY INTO의 주요 차이점은 무엇입니까?
Databricks-Certified-Professional-Data-Engineer 문제 5
델타 레이크 자동 압축에 대한 설명은 무엇입니까?

