職責：

• 設計並實施使用 Azure 數據工廠 (ADF)、Azure Databricks 和 Azure Synapse 分析的數據管道。
• 為結構化和非結構化數據源開發和優化 ETL/ELT 流程。
• 確保在 Azure 環境內有效的數據攝取、轉換和存儲。
• 設計和管理數據湖、數據倉庫和關係型數據庫 (Azure SQL、Azure Synapse、Azure Cosmos DB)。
• 優化數據庫性能、索引和分區策略。
• 實施數據安全性、訪問控制和加密最佳實踐。
• 部署和管理 Azure 數據服務，包括 Azure Blob 存儲、Azure 數據湖和 Azure 函數。
• 監控和排除數據管道性能問題。
• 使用 Azure Purview 和數據編目工具確保數據質量、完整性和治理。
• 遵守合規要求並執行數據隱私最佳實踐。
• 為數據工作流實施日誌記錄、監控和警報解決方案。
• 與數據科學家、分析師和業務團隊密切合作，了解數據需求。
• 記錄數據解決方案、架構和最佳實踐以作未來參考。
• 為初級工程師提供輔導和技術指導。

資格：

必須擁有

• Azure 數據工程師助理或 AWS/Google 上的同等證書
• 具備基礎設施與 DevOps 或數據管道經驗

擁有

• Snowflake 架構證書或實踐經驗者為佳
• Databricks 證書或實踐經驗者為佳

請參考職位描述。