Databricks-Certified-Professional-Data-Engineer 문제 81

작업 클러스터가 시작되는 데 6~8분이 소요되어 작업이 제 시간에 완료되지 않는 경우 클러스터 시작 시간을 줄이기 위해 취할 수 있는 단계는 무엇입니까?

Databricks-Certified-Professional-Data-Engineer 문제 82

CSV, JSON, TEXT, BINARY 형식을 사용하여 외부 테이블을 정의할 때, 외부 테이블에 대한 모든 쿼리는 성능상의 이유로 데이터와 위치를 캐시합니다. 따라서 Spark 세션 내에서 도착한 새 파일은 초기 쿼리 이후에는 사용할 수 없게 됩니다. 이러한 제약을 어떻게 해결할 수 있을까요?

Databricks-Certified-Professional-Data-Engineer 문제 83

데이터 아키텍트는 다양한 비즈니스 요구 사항에 맞춰 데이터를 효율적으로 처리하기 위해 Databricks 솔루션을 설계하고 있습니다.
어떤 시나리오에서 데이터 엔지니어는 스트리밍 테이블 대신 구체화된 뷰를 사용해야 할까요?

Databricks-Certified-Professional-Data-Engineer 문제 84

팀원이 델타 파이프라인을 설정하고 기존 델타 라이브 테이블인 sales_orders_cleaned를 기반으로 집계된 지표를 사용하여 동일한 파이프라인에 두 번째 골드 테이블을 구축하려고 하지만 파이프라인을 시작하는 데 문제가 발생하고 파이프라인에서 sales_orders_cleaned 테이블을 찾을 수 없다는 메시지가 표시됩니다. 문제를 식별하고 해결하라는 요청을 받았습니다.
1. 라이브 테이블 sales_order_in_chicago 만들기
2.AS
3. SELECT order_date, city, sum(price) as sales,
4. 판매 주문 정리됨
5. 도시 = '시카고')
6. 주문 날짜, 도시별로 그룹화

Databricks-Certified-Professional-Data-Engineer 문제 85

데이터 엔지니어는 Databricks에서 Kafka 스트림의 레코드를 처리하는 파이프라인을 설계하고 있는데, 이 파이프라인에서는 늦게 도착하는 데이터가 흔합니다.
데이터 엔지니어는 어떤 접근 방식을 사용해야 할까요?