Databricks-Certified-Data-Engineer-Associate 문제 86

데이터 엔지니어가 Spark SQL 테이블 my_table을 삭제하려고 시도하면서 다음 명령을 실행합니다.
테이블이 있으면 삭제합니다. my_table;
이 명령을 실행한 후 엔지니어는 데이터 파일과 메타데이터 파일이 파일 시스템에서 삭제되었음을 알게 됩니다.
다음 중 모든 파일이 삭제된 이유를 설명하는 것은 무엇입니까?

Databricks-Certified-Data-Engineer-Associate 문제 87

엔지니어링 관리자는 Databricks SQL 쿼리를 사용하여 각 데이터 소스의 수집 지연 시간을 모니터링합니다. 관리자는 매일 쿼리 결과를 확인하지만, 매일 수동으로 쿼리를 다시 실행하고 결과를 기다리고 있습니다.
관리자는 다음 중 어떤 접근 방식을 사용하여 쿼리 결과가 매일 업데이트되도록 할 수 있습니까?

Databricks-Certified-Data-Engineer-Associate 문제 88

데이터 엔지니어가 데이터 파이프라인을 설계하고 있습니다. 소스 시스템은 다른 프로세스에서도 사용되는 공유 디렉터리에 파일을 생성합니다. 따라서 파일은 그대로 유지되어야 하며 디렉터리에 누적됩니다. 데이터 엔지니어는 파이프라인의 이전 실행 이후 새로 생성된 파일을 파악하고, 각 실행 시 해당 파일만 수집하도록 파이프라인을 설정해야 합니다.
다음 도구 중 데이터 엔지니어는 이 문제를 해결하는 데 어떤 도구를 사용할 수 있나요?

Databricks-Certified-Data-Engineer-Associate 문제 89

데이터 엔지니어는 테이블에서 데이터를 읽고, 조작한 다음 새 테이블에 스트리밍 쓰기를 수행하는 구조적 스트리밍 작업을 구성했습니다.
데이터 엔지니어가 사용한 코드 블록은 아래와 같습니다.

데이터 엔지니어가 필요한 만큼의 배치로 사용 가능한 모든 데이터를 처리하는 쿼리만 원하는 경우, 데이터 엔지니어는 다음 코드 줄 중에서 어떤 줄을 사용하여 빈칸을 채워야 할까요?

Databricks-Certified-Data-Engineer-Associate 문제 90

데이터 엔지니어는 매일 아침 업무 시작 전에 실행되는 단일 작업 Job을 가지고 있습니다. 업스트림 데이터 문제를 파악한 후, 원래 작업 전에 새 노트북을 실행하기 위해 다른 작업을 설정해야 합니다.
다음 중 데이터 엔지니어가 새로운 작업을 설정하는 데 사용할 수 있는 접근 방식은 무엇입니까?