Professional-Data-Engineer 문제 171
매월 제3자로부터 CSV 형식의 데이터 파일을 받습니다. 이 데이터를 정리해야 하지만 3개월마다 파일의 스키마가 변경됩니다. 이러한 변환을 구현하기 위한 요구 사항은 다음과 같습니다.
* 일정에 따라 변환 실행
* 비개발자 분석가가 변환을 수정할 수 있도록 지원
* 변형 설계를 위한 그래픽 도구 제공
당신은 무엇을해야합니까?
* 일정에 따라 변환 실행
* 비개발자 분석가가 변환을 수정할 수 있도록 지원
* 변형 설계를 위한 그래픽 도구 제공
당신은 무엇을해야합니까?
Professional-Data-Engineer 문제 172
거의 실시간으로 분당 10,000개의 메시지 속도로 Google BigQuery에 소셜 미디어 게시물을 저장하고 분석해야 합니다. 처음에는 개별 게시물에 스트리밍 삽입을 사용하도록 애플리케이션을 디자인합니다.
또한 애플리케이션은 스트리밍 삽입 직후에 데이터 집계를 수행합니다. 스트리밍 삽입 후 쿼리가 강력한 일관성을 나타내지 않고 쿼리 보고서에서 진행 중인 데이터가 누락될 수 있음을 발견했습니다. 애플리케이션 디자인을 어떻게 조정할 수 있습니까?
또한 애플리케이션은 스트리밍 삽입 직후에 데이터 집계를 수행합니다. 스트리밍 삽입 후 쿼리가 강력한 일관성을 나타내지 않고 쿼리 보고서에서 진행 중인 데이터가 누락될 수 있음을 발견했습니다. 애플리케이션 디자인을 어떻게 조정할 수 있습니까?
Professional-Data-Engineer 문제 173
주택 가격을 예측하는 모델을 만들고 있습니다. 예산 제약으로 인해 리소스가 제한된 단일 가상 머신에서 실행해야 합니다. 어떤 학습 알고리즘을 사용해야 할까요?
Professional-Data-Engineer 문제 174
Dataflow는 일괄 데이터 파이프라인 또는 스트리밍 데이터 파이프라인을 처리하나요?
