Professional-Data-Engineer 문제 291
어떤 회사의 주가를 분석하고 있습니다. 5초마다 지난 30초 동안의 데이터에 대한 이동 평균을 계산해야 합니다. Pub/Sub에서 데이터를 읽어 DataFlow를 사용하여 분석을 수행하고 있습니다. 윈도우 파이프라인을 어떻게 설정해야 할까요?
Professional-Data-Engineer 문제 292
해당 업계의 정부 규정에 따라 접근 기록에 대한 감사 가능한 기록을 유지해야 합니다.
특정 유형의 데이터에 대해서만 그렇습니다. 만료되는 모든 로그가 올바르게 보관된다고 가정할 때, 어디에 저장해야 할까요?
해당 규정의 적용을 받는 데이터는 무엇입니까?
특정 유형의 데이터에 대해서만 그렇습니다. 만료되는 모든 로그가 올바르게 보관된다고 가정할 때, 어디에 저장해야 할까요?
해당 규정의 적용을 받는 데이터는 무엇입니까?
Professional-Data-Engineer 문제 293
사람 얼굴이 포함되어 있는지 여부가 레이블로 표시된 이미지 데이터셋이 있다고 가정해 봅시다. 이 레이블이 지정된 데이터셋을 사용하여 이미지에서 사람 얼굴을 인식하는 신경망을 구축하려면 어떤 접근 방식이 가장 효과적일까요?
Professional-Data-Engineer 문제 294
귀사의 자동차 공장은 기계 측정값을 메시지 형태로 Google Cloud 프로젝트의 Pub/Sub 토픽에 전송하고 있습니다. Apache Beam SDK로 작성한 Dataflow 스트리밍 작업은 이러한 메시지를 읽고, Pub/Sub에 승인 응답을 보내고, Doffs 인스턴스에서 사용자 지정 비즈니스 로직을 적용한 후, 결과를 BigQuery에 기록합니다. 만약 비즈니스 로직이 메시지 처리에 실패할 경우, 해당 메시지가 Pub/Sub으로 전송되도록 하고 싶습니다.
/알림 목적으로 모니터링하려는 하위 주제입니다. 어떻게 해야 할까요?
/알림 목적으로 모니터링하려는 하위 주제입니다. 어떻게 해야 할까요?
Professional-Data-Engineer 문제 295
귀사는 BigQuery를 중앙 집중식 분석 플랫폼으로 사용하고 있습니다. 매일 새로운 데이터가 로드되고, ETL 파이프라인이 원본 데이터를 수정하여 최종 사용자가 사용할 수 있도록 준비합니다. 이 ETL 파이프라인은 정기적으로 수정되며 오류가 발생할 수 있지만, 때로는 오류가 2주 후에야 발견되기도 합니다. 이러한 오류로부터 복구할 수 있는 방법을 마련해야 하며, 백업은 스토리지 비용을 최적화해야 합니다. BigQuery에서 데이터를 어떻게 구성하고 백업을 어떻게 저장해야 할까요?
