Databricks-Certified-Data-Engineer-Professional-KR 문제 6
데이터 엔지니어가 데이터 편향과 빈번하게 변경되는 쿼리 필터 열로 인해 문제가 발생하는 관리형 델타 테이블을 최적화하고 있습니다. 엔지니어는 쿼리 패턴이 변화할 때 발생하는 비용이 많이 드는 데이터 재작성을 피하고자 합니다. 테이블 크기는 1TB 미만입니다. 데이터 엔지니어는 이 요구 사항을 어떻게 충족해야 할까요?
Databricks-Certified-Data-Engineer-Professional-KR 문제 7
Databricks 작업이 3개의 태스크로 구성되었으며, 각 태스크는 Databricks 노트북입니다. 태스크 A는 다른 태스크에 종속되지 않습니다. 태스크 B와 C는 병렬로 실행되며, 각각 태스크 A에 직렬 종속성을 갖습니다.
작업 A가 예정된 실행 중에 실패할 경우, 이 실행 결과를 설명하는 문장은 무엇입니까?
작업 A가 예정된 실행 중에 실패할 경우, 이 실행 결과를 설명하는 문장은 무엇입니까?
Databricks-Certified-Data-Engineer-Professional-KR 문제 8
시설 모니터링 팀이 Delta 테이블의 device_readings 데이터를 기반으로 거의 실시간에 가까운 PowerBI 대시보드를 구축하고 있습니다.
열:
device_id (문자열, 고유 센서 ID)
event_ts(TIMESTAMP, 수집 타임스탬프 UTC)
temperature_c (DOUBLE, °C 단위 온도)
요구 사항:
각 센서에 대해 겹치지 않는 5분 간격으로 한 행씩 생성합니다.
간격은 2분 간격으로 표시됩니다(예: 00:02-00:07, 00:07-00:12, ...).
각 행에는 구간 시작, 구간 종료 및 평균값이 포함되어야 합니다.
해당 조각의 온도.
하위 BI 도구(예: Power BI)는 간격 타임스탬프를 사용해야 합니다.
시계열 막대 그래프를 그리기 위해.
열:
device_id (문자열, 고유 센서 ID)
event_ts(TIMESTAMP, 수집 타임스탬프 UTC)
temperature_c (DOUBLE, °C 단위 온도)
요구 사항:
각 센서에 대해 겹치지 않는 5분 간격으로 한 행씩 생성합니다.
간격은 2분 간격으로 표시됩니다(예: 00:02-00:07, 00:07-00:12, ...).
각 행에는 구간 시작, 구간 종료 및 평균값이 포함되어야 합니다.
해당 조각의 온도.
하위 BI 도구(예: Power BI)는 간격 타임스탬프를 사용해야 합니다.
시계열 막대 그래프를 그리기 위해.
Databricks-Certified-Data-Engineer-Professional-KR 문제 9
머신러닝 팀은 델타 레이크 레이크의 레이크하우스에 있는 customer_parsams라는 테이블을 고객 이탈 예측에 사용합니다. 이 테이블에는 여러 상위 소스에서 가져온 고객 정보가 포함되어 있습니다. 현재 데이터 엔지니어링 팀은 상위 데이터 소스에서 가져온 최신 유효 값으로 테이블을 덮어쓰는 방식으로 매일 밤 이 테이블을 업데이트하고 있습니다.
데이터 엔지니어 팀은 업데이트가 완료되는 즉시 새 버전과 이전 버전 간의 차이점을 확인하고 싶어합니다. 현재 구현 방식을 고려할 때, 어떤 방법을 사용할 수 있을까요?
데이터 엔지니어 팀은 업데이트가 완료되는 즉시 새 버전과 이전 버전 간의 차이점을 확인하고 싶어합니다. 현재 구현 방식을 고려할 때, 어떤 방법을 사용할 수 있을까요?
Databricks-Certified-Data-Engineer-Professional-KR 문제 10
데이터 엔지니어가 방대한 사용자 활동 로그를 user_id별로 그룹화하여 집계 작업을 수행하고 있습니다. 일부 사용자의 레코드가 수백만 개에 달하여 작업 불균형과 실행 시간 증가 문제가 발생하고 있습니다. 이러한 불균형을 해결할 수 있는 기법은 무엇일까요?