Professional-Data-Engineer 문제 111

귀사에는 프로젝트 A와 프로젝트 B라는 두 개의 Google Cloud 프로젝트가 있습니다. 프로젝트 A에는 기밀 소스로부터 데이터를 수신하는 Pub/Sub 토픽이 있습니다. 프로젝트 A의 리소스만 해당 토픽의 데이터에 접근할 수 있어야 합니다. 프로젝트 B 및 향후 생성될 모든 프로젝트가 프로젝트 A 토픽의 데이터에 접근할 수 없도록 하려면 어떻게 해야 할까요?

Professional-Data-Engineer 문제 112

클라우드 데이터프로세서 클러스터에서 정해진 스케줄에 따라 실행되는 여러 개의 Spark 작업이 있습니다. 일부 작업은 순차적으로 실행되고, 일부 작업은 동시에 실행됩니다. 이 프로세스를 자동화해야 합니다. 어떻게 해야 할까요?

Professional-Data-Engineer 문제 113

귀사는 내부 IT 애플리케이션과 Google BigQuery를 통합하여 사용자가 애플리케이션 인터페이스에서 BigQuery를 쿼리할 수 있도록 하려고 합니다. 개별 사용자가 BigQuery에 인증할 필요도 없고, 데이터 세트에 대한 접근 권한도 부여하고 싶지 않습니다. IT 애플리케이션에서 BigQuery에 안전하게 접근하는 방법을 찾고 있습니다.
어떻게 해야 할까요?

Professional-Data-Engineer 문제 114

당신은 매일 새벽 2시에 여러 애플리케이션 로그 파일을 하나의 로그 파일로 묶어 처리하는 제조 공장에서 근무합니다. 당신은 해당 로그 파일을 처리하기 위한 Google Cloud Dataflow 작업을 작성했습니다.
로그 파일을 하루에 한 번, 가능한 한 저렴한 비용으로 처리해야 합니다. 어떻게 해야 할까요?

Professional-Data-Engineer 문제 115

당신은 대형 전자상거래 회사에서 근무하고 있습니다. 고객 주문 데이터는 Bigtable에 저장되어 있으며, 30일 후 데이터를 삭제하는 가비지 컬렉션 정책과 1개의 버전 관리 시스템을 설정해 놓았습니다. 데이터 분석가들이 고객 총 지출액을 보고하는 쿼리를 실행할 때, 30일보다 오래된 고객 데이터가 포함되는 경우가 있습니다. 비용과 오버헤드를 최소화하면서 분석가들이 30일보다 오래된 고객 데이터를 보지 않도록 해야 합니다. 어떻게 해야 할까요?