MOC 20767 Implementing a SQL Data Warehouse (Legacy)

Wichtiger Hinweis: 70-767 ist eingestellt. Inhalte sind in SQL Server 2017/2019/2022 noch weitgehend gültig. Azure SQL Data Warehouse heißt heute Azure Synapse Analytics. Block Schlüsselelemente einer Data Warehousing-Lösung: DW vs. OLTP-Datenbanken, dimensionales Modell (Star vs. Snowflake), Fakten- vs. Dimensionstabellen, Slowly Changing Dimensions (SCD Types 1, 2, 3), Master Data, Data Marts vs. Enterprise DW. Block Hardware-Überlegungen: CPU (mehr Cores für parallele Queries), RAM (groß genug für häufig benötigte Daten im Cache), Storage (separat für Data, Log, TempDB; SSDs/NVMe für Performance), Network-Bandbreite zwischen Source-Systemen und DW. Block Logisches Design: dimensionale Modellierung nach Kimball, Bus-Architektur, Conformed Dimensions, Faktentabellen-Typen (Transaction Fact, Periodic Snapshot Fact, Accumulating Snapshot Fact), Aggregations-Tabellen für Performance. Block Physisches Design: Tabellen-Partitionierung (Range Partitioning für DW), Indizes (Columnstore für Analytics, traditional B-Tree für OLTP-ähnliche Queries), Compression, Filegroup-Strategien (Hot/Warm/Cold Storage). Block SSIS (SQL Server Integration Services): Architektur (Control Flow + Data Flow), Connection Managers, Project Deployment Model vs. Package Deployment Model, Parameter und Variablen, Control Flow Tasks (Execute SQL, File System, Data Flow, Foreach Loop), Data Flow Components (Sources, Transformations, Destinations — Slowly Changing Dimension Wizard, Lookup, Merge Join, Conditional Split, Pivot/Unpivot), Error Handling und Logging, SSIS-Performance (Lookup-Caching-Modi, Buffer-Sizing, parallele Ausführung). Block SQL Server Data Quality Services (DQS): Data Quality Knowledge Base mit Domain Rules, Cleansing Projects, Matching für Dubletten, Integration in SSIS via DQS Cleansing Transformation. Block SQL Server Master Data Services (MDS): Master Data Hub als „Single Source of Truth" für Stammdaten, MDS Add-in für Excel als Endbenutzer-Tool, Hierarchies und Collections, Business Rules, Subscription Views in DW. Block Azure SQL Data Warehouse (heute Azure Synapse Analytics): Cloud-DW mit MPP, Distribution Styles (Hash, Round Robin, Replicated), Polybase für externe Daten in S3/Azure Blob, Workload Management mit Resource Classes. Block Incremental Loads: Change Data Capture (CDC) im Source-System, Change Tracking, Timestamps-basierte Incremental Loads, MERGE-Statement für Upserts.