1. 行業經驗:供應鏈領域相關項目經驗者優先
2. 項目經驗:5年及以上數據開發或數據分析相關經驗,有數倉遷移融合經驗優先
3. 技能要求:
(1)扎實的SQL功底,復雜sql優化
(2)大數據生態圈理解:Hadoop、Hive、Spark、Flink、Kafka、Impala、Kudu等至少兩種大數據組件的工作原理和使用場景,至少精通其中一個組件
(3)有mpp數據庫調優經驗,如doris,starrocks,熟悉DolphinScheduler等調度器
(4)掌握 Linux ,熟悉Sql、Shell,精通至少一種編程語言(Python /Java)
(5)有數據治理,數據血緣,數據資產建設等經驗優化
(6)具備處理線上數據問題
4、
(1)責任心強、協作意識強、抗壓性強,具備良好的思維邏輯和基本的業務分析能力
(2)計算機科學、軟件工程或相關專業本科及以上學歷
(3)具備良好的溝通能力和團隊協作精神
崗位職責:
1. 負責數據倉庫的數據開發全流程工作,包括數據接入,模型設計,ETL等
2. 大數據量實時&離線作業的優化
3. 各種數據問題定位分析處理
4. 負責深度參與供應鏈數據倉庫建設和管理,包括但不限于數據血緣、數據質量、數據安全等標準體系建設
5. 負責數據可視化服務的涉及、開發、部署及迭代優化。
6. 探索研究大數據領域新技術&新架構