설명
Box 1 : 성공
박스2 : 실패
예:
이제 Activity1이 Activity2에 대한 성공 경로와 Activity3에 대한 실패 경로를 갖는 3개의 활동이 있는 파이프라인이 있다고 가정해 보겠습니다. Activity1이 실패하고 Activity3이 성공하면 파이프라인이 실패합니다. 실패 경로와 함께 성공 경로가 있으면 파이프라인에서 보고하는 결과가 변경되지만 파이프라인의 활동 실행은 이전 시나리오와 동일합니다.

Activity1이 실패하고, Activity2가 건너뛰어지고, Activity3이 성공합니다. 파이프라인은 실패를 보고합니다.
참조:
https://datasavvy.me/2021/02/18/azure-data-factory-activity-failures-and-pipeline-outcomes/

설명
텍스트 설명 자동 생성

참조:
https://docs.microsoft.com/en-us/azure/azure-sql/database/dynamic-data-masking-overview
주제 2, Contoso 사례 연구 거래 날짜
Contoso는 3년간의 고객, 거래, 운영, 소싱 및 공급업체 데이터를 보유하고 있으며, 이는 여러 온프레미스 Microsoft SQL Server 서버에 저장된 100억 개의 레코드로 구성되어 있습니다. SQL Server 인스턴스에는 다양한 운영 체제의 데이터가 포함되어 있습니다. 데이터는 SQL Server Integration Services(SSIS) 패키지를 사용하여 인스턴스에 로드됩니다.
모든 제품 판매 거래를 회사 전체 판매 거래 데이터 세트로 결합하면 거래당 한 행씩, 총 50억 개의 행이 포함된 단일 테이블이 생성될 것으로 예상합니다.
판매 거래 데이터를 타겟으로 하는 대부분의 쿼리는 소매점에서 판매된 제품과 다른 기간 동안 온라인에서 판매된 제품을 식별하는 데 사용됩니다. 3년 이상 된 판매 거래 데이터는 매월 제거됩니다.
각 소매점의 주소를 포함하는 소매점 테이블을 만들 계획입니다. 테이블은 약 2MB입니다. 소매점 매출에 대한 쿼리에는 소매점 주소가 포함됩니다.
프로모션 ID를 포함하는 프로모션 테이블을 만들 계획입니다. 프로모션 ID는 특정 제품과 연결됩니다. 제품은 제품 ID로 식별됩니다. 테이블은 약 5GB입니다.
트위터 데이터 스트리밍
Contoso의 전자상거래 부서에서는 회사 제품을 참조하는 인기 있는 Twitter 피드를 수집하고 해당 제품을 Azure Event Hubs로 푸시하는 Azure 논리 앱을 개발합니다.
계획된 변경 사항
Contoso는 다음과 같은 변경 사항을 구현할 계획입니다.
* 판매 거래 데이터 세트를 Azure Synapse Analytics에 로드합니다.
* SSIS 패키지를 사용하여 온-프레미스 데이터 저장소를 Azure Synapse Analytics와 통합합니다.
* Azure Synapse Analytics를 사용하여 Twitter 피드를 분석하여 제품에 대한 고객 감정을 평가합니다.
판매 거래 데이터 세트 요구 사항
Contoso는 판매 거래 데이터 세트에 대해 다음과 같은 요구 사항을 식별합니다.
* 판매 거래 기록이 포함된 파티션 데이터. 파티션은 월별로 효율적인 로드를 제공하도록 설계되어야 합니다. 경계 값은 오른쪽 파티션에 속해야 합니다.
* 제품 ID를 기준으로 판매 거래 기록을 결합하고 필터링하는 쿼리가 가능한 한 빨리 완료되도록 합니다.
* 소매점 주소 변경을 설명하기 위해 대체 키를 구현합니다.
* 데이터 저장 비용과 성능이 예측 가능한지 확인하세요.
* 오래된 기록을 제거하는 데 걸리는 시간을 최소화합니다.
고객 감정 분석 요구 사항
Contoso는 고객 감정 분석에 대해 다음과 같은 요구 사항을 파악했습니다.
* Contoso 사용자가 Twitter 피드를 호스팅하는 데이터 레코드의 콘텐츠를 쿼리하기 위해 A/ure Synapse Analytics 전용 SQL 풀에서 PolyBase를 사용하도록 허용합니다. 데이터는 행 수준 보안(RLS)을 사용하여 보호해야 합니다. 사용자는 자신의 A/ureAD 자격 증명을 사용하여 인증해야 합니다.
* 추가 처리량이나 용량 단위를 구입하지 않고도 이벤트 허브에서 Azure Storage로 Twitter 피드를 수집하는 처리량을 극대화합니다.
* Event Hubs Capture를 사용하여 Azure Storage에 Twitter 피드를 저장합니다. 피드는 Parquet 파일로 변환됩니다.
* 데이터 저장소가 개체 수준까지 Azure AD 기반 액세스 제어를 지원하는지 확인하세요.
* Twitter 피드 데이터 기록을 유지하기 위한 관리 노력을 최소화합니다.
* Twitter 피드 데이터 기록을 제거합니다. 해당 기록은 2년 이상 되었습니다.
데이터 통합 ​​요구 사항
Contoso는 데이터 통합에 대한 다음과 같은 요구 사항을 파악했습니다.
기존 SSIS 패키지를 활용하는 Azure 서비스를 사용하여 온-프레미스 데이터를 Azure Synaps Analytics의 전용 SQL 풀에 저장된 데이터 세트로 수집하고 해당 데이터를 변환합니다.
여러 데이터 엔지니어가 수집 및 변환 활동에 대한 변경 사항을 버전 제어하고 독립적으로 개발할 수 있는 프로세스를 식별합니다.

참조:
https://docs.microsoft.com/en-us/azure/data-factory/how-to-create-tumbling-window-trigger

참조:
https://docs.microsoft.com/en-us/sql/t-sql/statements/create-partition-function-transact-sql?view=sql-server-ver15