Побудова Data Lake і налаштування Snowflake

Необхідні умови:

• Курси з Data Lake та налаштування Snowflake або еквівалентні знання

Програма курсу

1: Вступ до Data Lake

• Що таке Data Lake / Data Warehouse / Lakehouse
• Основні принципи побудови (Lake Zones: Raw, Curated, Consumer)

2: Azure Data Lake Fundamentals

• Ієрархія в Data Lake Storage , ACL (Access control lists)
• Робота через Azure Portal і Storage Explorer
• Управління правами доступу (Azure RBAC, SAS)

3: Інтеграція з Snowflake

• External Stages (Azure Blob / ADLS)
• Storage Integration
• COPY INTO, External Tables

4: Data Ingestion і трансформації

• Azure Data Factory: pipelines, datasets, linked services
• Snowpipe та автоматичне завантаження
• Трансформації в Snowflake через dbt
• SQL Tasks

5: Data Governance і аналітика

• Azure Purview / Microsoft Fabric Data Catalog
• Data lineage, класифікація даних, PII дані

6: Автоматизація, моніторинг

• Terraform
• CI/CD пайплайни (GitHub Actions, Azure DevOps)
• Моніторинг запитів і витрат у Snowflake