Professional-Data-Engineer 문제 11
Cloud Dataproc 클러스터에서 일정에 따라 실행되는 Spark 작업이 여러 개 있습니다. 일부 작업은 순서대로 실행되고 일부 작업은 동시에 실행됩니다. 이 프로세스를 자동화해야 합니다. 당신은 무엇을 해야 합니까?
Professional-Data-Engineer 문제 12
당신은 애플리케이션 로그 파일을 한 번에 하나의 로그 파일로 일괄 처리하는 제조 공장에서 근무합니다.
하루 오전 2시. 해당 로그 파일을 처리하기 위해 Google Cloud Dataflow 작업을 작성했습니다. 당신은 만들어야합니다
가능한 한 저렴하게 하루에 한 번씩 로그 파일을 처리하도록 하세요. 당신은 무엇을 해야 합니까?
하루 오전 2시. 해당 로그 파일을 처리하기 위해 Google Cloud Dataflow 작업을 작성했습니다. 당신은 만들어야합니다
가능한 한 저렴하게 하루에 한 번씩 로그 파일을 처리하도록 하세요. 당신은 무엇을 해야 합니까?
Professional-Data-Engineer 문제 13
다음 중 Google Cloud Bigtable의 스토리지로 HDD(하드 디스크 드라이브)를 선택하는 유효한 사용 사례가 아닌 것은 무엇인가요?
Professional-Data-Engineer 문제 14
미디어 스트리밍 서비스인 모바일 애플리케이션을 위한 새로운 스토리지 시스템을 배포하려고 합니다. 가장 적합한 것은 Google Cloud Datastore라고 결정합니다. 여러 속성을 가진 엔터티가 있으며 그 중 일부는 여러 값을 가질 수 있습니다. 예를 들어, '영화' 엔터티에서 '배우' 속성과 '태그' 속성은 여러 값을 가지지만 '출시 날짜' 속성은 그렇지 않습니다. 일반적인 쿼리는 date_released를 기준으로 정렬된 actor=<actorname>이 있는 모든 영화 또는 date_released를 기준으로 정렬된 tag=Comedy가 있는 모든 영화를 요청합니다. 인덱스 수의 조합 폭발을 어떻게 방지해야 합니까?




Professional-Data-Engineer 문제 15
귀하의 회사는 매시간 20,000개의 파일을 생성합니다. 각 데이터 파일은 쉼표로 구분된 값으로 형식화됩니다.
4KB 미만의 (CSV) 파일입니다. 모든 파일은 Google Cloud Platform에서 수집되어야만 가능합니다.
처리됨. 회사 사이트의 Google Cloud 지연 시간은 200ms이며 인터넷 연결은
대역폭은 50Mbps로 제한됩니다. 현재 가상 머신에 보안 FTP(SFTP) 서버를 배포하고 있습니다.
데이터 수집 지점으로 Google Compute Engine을 사용합니다. 로컬 SFTP 클라이언트는 전용 시스템에서 실행되어
CSV 파일을 그대로 전송합니다. 목표는 전날의 데이터로 보고서를 작성하는 것입니다.
매일 오전 10시까지 임원. 이 디자인은 현재의 볼륨을 거의 따라갈 수 없습니다.
대역폭 활용도는 다소 낮습니다.
계절적 요인으로 인해 회사에서는 다음 3년 동안 파일 수가 두 배로 늘어날 것으로 예상한다는 말을 들었습니다.
개월. 어떤 두 가지 조치를 취해야 합니까? (2개를 선택하세요.)
4KB 미만의 (CSV) 파일입니다. 모든 파일은 Google Cloud Platform에서 수집되어야만 가능합니다.
처리됨. 회사 사이트의 Google Cloud 지연 시간은 200ms이며 인터넷 연결은
대역폭은 50Mbps로 제한됩니다. 현재 가상 머신에 보안 FTP(SFTP) 서버를 배포하고 있습니다.
데이터 수집 지점으로 Google Compute Engine을 사용합니다. 로컬 SFTP 클라이언트는 전용 시스템에서 실행되어
CSV 파일을 그대로 전송합니다. 목표는 전날의 데이터로 보고서를 작성하는 것입니다.
매일 오전 10시까지 임원. 이 디자인은 현재의 볼륨을 거의 따라갈 수 없습니다.
대역폭 활용도는 다소 낮습니다.
계절적 요인으로 인해 회사에서는 다음 3년 동안 파일 수가 두 배로 늘어날 것으로 예상한다는 말을 들었습니다.
개월. 어떤 두 가지 조치를 취해야 합니까? (2개를 선택하세요.)
