大數據開發（Databricks 平臺優先）

崗位職責
1. 基于 Azure Databricks 平臺，設計與開發高效、可靠的數據處理管道。
2. 使用 SQL 與 Spark 進行大規模數據的清洗、轉換、聚合與計算。
3. 構建與優化數據倉庫及數據模型，保障數據架構的合理性與查詢性能。
4. 開發與維護數據服務與接口，支持報表系統及下游數據消費。
5. 實施數據質量監控與校驗，確保數據處理結果的準確性與穩定性。
6. 持續優化數據處理任務的執行效率與資源利用率。
任職要求（必需）
1. 統招本科及以上學歷，計算機、軟件工程等相關專業。
2. 大數據開發經驗。
3. 精通 SQL，能編寫復雜查詢并進行深度性能優化。
4. 擁有 Azure Databricks 平臺的商業項目開發與運維實戰經驗。
5. 熟練掌握 Spark 開發，理解其核心原理與調優方法。
6. 具備 Python 開發能力，用于腳本編寫、任務自動化及數據處理。
7. 具備數據倉庫建模的實際經驗。
8. 能夠將英語作為工作語言，熟練閱讀英文技術文檔、平臺界面及代碼。
9. 良好的團隊協作與溝通能力。
優先條件
1. 熟悉 Delta Lake / Data Lakehouse 架構及最佳實踐。
2. 擁有 Microsoft Azure 云服務相關經驗，特別是 Azure Data Factory (ADF) 和 ADLS。
3. 了解 Databricks Unity Catalog 等數據治理工具。