Databricks-Certified-Data-Engineer-Associate 문제 56

데이터 분석팀에서 상시 구동 SQL 엔드포인트에 연결했을 때 Databricks SQL 쿼리가 너무 느리게 실행된다는 사실을 발견했습니다. 여러 팀원이 동시에 소규모 쿼리를 실행할 때 이 문제가 발생한다고 주장하며, 데이터 엔지니어링팀에 도움을 요청했습니다. 데이터 엔지니어링팀은 각 팀의 쿼리가 동일한 SQL 엔드포인트를 사용한다는 사실을 발견했습니다.
다음 중 데이터 엔지니어링 팀은 어떤 접근 방식을 사용하여 팀의 쿼리 지연 시간을 개선할 수 있습니까?

Databricks-Certified-Data-Engineer-Associate 문제 57

구조화된 스트리밍이 재시작 및/또는 재처리를 통해 모든 종류의 실패를 처리할 수 있도록 처리의 정확한 진행 상황을 안정적으로 추적하기 위해 Spark는 다음 두 가지 접근 방식 중 어떤 것을 사용하여 각 트리거에서 처리되는 데이터의 오프셋 범위를 기록합니까?

Databricks-Certified-Data-Engineer-Associate 문제 58

데이터 엔지니어가 데이터 파이프라인을 설계하고 있습니다. 소스 시스템은 다른 프로세스에서도 사용되는 공유 디렉터리에 파일을 생성합니다. 따라서 파일은 그대로 유지되어야 하며 디렉터리에 누적됩니다. 데이터 엔지니어는 파이프라인의 이전 실행 이후 새로 생성된 파일을 파악하고, 각 실행 시 해당 파일만 수집하도록 파이프라인을 설정해야 합니다.
다음 도구 중 데이터 엔지니어는 이 문제를 해결하는 데 어떤 도구를 사용할 수 있나요?

Databricks-Certified-Data-Engineer-Associate 문제 59

데이터 엔지니어는 Databricks에서 Lakeflow 선언적 파이프라인(LDP)을 사용하여 고객 데이터를 수집하는 간단한 데이터 파이프라인을 구축하고 있습니다. 원시 고객 데이터는 JSON 형식으로 클라우드 스토리지에 저장됩니다. 이 작업은 원시 JSON 데이터를 읽고 추가 처리를 위해 델타 테이블에 저장하는 Lakeflow 선언적 파이프라인을 만드는 것입니다.
어떤 코드 조각이 원시 JSON 데이터를 올바르게 수집하고 LDP를 사용하여 Delta 테이블을 생성할까요?

Databricks-Certified-Data-Engineer-Associate 문제 60

데이터 엔지니어는 프랑스에 거주하는 고객의 이름이 포함된 새로운 테이블을 만들고 싶어합니다.
그들은 다음과 같은 명령을 썼습니다.

고위 데이터 엔지니어는 조직 정책에 따라 새 테이블에 개인 식별 정보(PII)가 포함된다는 것을 나타내는 테이블 속성을 포함해야 한다고 언급했습니다.
다음 코드 중에서 위의 빈칸을 채워 작업을 성공적으로 완료할 수 있는 것은 무엇입니까?