概述

掌握 Azure Databricks 與 Unity Catalog 的端對端資料工程。

本課程從基礎設定逐步進入生產部署,涵蓋環境配置與企業級治理。學習建立穩健的匯入管線、使用 Unity Catalog 實施安全措施,以及部署優化過的工作負載。

課程結束時,您將具備實務技能,能實施、保護及維護符合嚴格企業需求的可擴展湖屋解決方案。

為什麼選擇 KORNERSTONE

  • 經認證、由實務人員主導的專家證書培訓師,提供高品質的培訓
  • 官方訓練資料包含
  • 實務、情境導向學習——著重應用,而非僅理論
  • 優秀的通過率

涵蓋技能

  • 建立並設定 Azure Databricks 環境
  • 保護並管理 Azure Databricks
  • 中的 Unity 目錄物件

  • 使用 Azure Databricks
  • 準備與處理資料

  • 使用 Azure Databricks 部署與維護資料管線與工作負載

先決條件

學習者應對 Azure Databricks 工作空間與 Unity 目錄有良好理解,並熟悉資料存取模式及核心資料工程與資料倉儲概念。

此外,應具備 Azure 安全性基礎知識,包括 Microsoft Entra ID,並熟悉 Git 版本控制基礎。

目標受眾

目標族群是具備資料分析基礎知識、對雲端儲存有基本理解,並熟悉資料組織原則的資料工程師。

他們應該熟悉 SQL 操作,並有使用 Python (包括筆記本)進行資料工程任務的經驗。

培訓大綱

模組 1:建立與配置 Azure Databricks 環境

透過了解其架構、整合、計算選項及資料組織能力,建立堅實的 Azure Databricks 基礎。了解 Azure Databricks 如何提供雲端資料工程、分析與 AI 工作負載的統一平台。

  • 探索 Azure Databricks
  • 了解

  • Azure Databricks 架構
  • 了解 Azure Databricks 整合
  • 選擇與配置 Azure Databricks
  • 中的運算 在

  • Unity 目錄中建立與組織物件

模組 2:在 Azure Databricks

中保護與治理 Unity 目錄物件Unity Catalog 為 Azure Databricks 中的資料資產提供集中式治理與安全。本模組探討如何透過存取控制策略、細緻權限、憑證管理及認證機制來保護 Unity 目錄物件。

你將學習如何實作表格與架構層級的安全、強制執行列與欄篩選、安全存取 Azure Key Vault 的秘密,以及使用服務主體與受管理身份驗證資料存取。

  • 安全的 Unity 目錄物件
  • 治理 Unity 目錄物件

模組 3:使用 Azure Databricks

準備與處理資料掌握使用 Azure Databricks 與 Unity Catalog 建立穩健且可擴展資料工程解決方案的關鍵技能。學習設計有效資料模型、從多元來源匯入資料、將原始資料轉換為分析格式,並確保整個湖屋架構的資料品質。

  • 使用 Azure Databricks
  • 設計與實作資料建模 將

  • 資料匯入 Unity 目錄
  • 清理、轉換及載入
  • 資料

  • 使用 Azure Databricks 實作並管理資料品質限制

模組 4:使用 Azure Databricks

部署與維護資料管線與工作負載掌握在 Azure Databricks 中建立、部署及維護生產準備資料管線的完整生命週期——從設計、協調到監控與優化。

  • 使用 Azure Databricks
  • 設計與實作資料管線

  • 使用 Azure Databricks
  • 實作 Lakeflow 工作

  • 在 Azure Databricks
  • 中實作開發生命週期流程

  • 監控、故障排除及優化 Azure Databricks 工作負載

 

讓我們為你努力

找不到合適的日期? 需要訓練整個團隊嗎? 想找折扣嗎?
今天就與我們的培訓顧問聯繫。

日期與地點

考試與認證

Microsoft 認證:Azure Databricks 資料工程師助理

展現整合與建模資料、建立與部署優化管線,以及在 Azure Databricks 中排除與維護工作負載的專業能力。

  • 等級:中級
  • 產品:Azure Databricks
  • 職務:資料工程師
  • 主題:資料工程