學歷及專業要求:本科及以上,統計學、概率論、微積分、模糊數學、軟件工程、或計算機技術等專業
工作經驗要求5年以上
專業知識要求:
1、熟識整個大數據的完整處理流程,包括各種數據源各種格式的數據的采集、清洗、預處理、存儲、分析挖據、機器學習和數據可視化;
2.深刻理解大數據處理(分布式計算、內存計算、流計算、圖數據庫 大規模并行處理數據庫等)相關技術和實現方法有架構和設計實踐經驗;
3.熟識Hadoop、Spark、YARN、MapReduce、Impala、Flume、Kafaka等大數據平臺和開源軟件,有實際項目架構經驗;
專業技能要求:
1、具備良好的文案能力,文筆通暢,邏輯思維較強。
2、具備良好的溝通和協調能力,能迅速理解問題關鍵點和用戶痛點,并能簡明扼要的傳達產品的價值點。
3、至少符合以下一條或多條標準:
1)具備數據治理、數據中臺類產品的設計與開發經驗:如數據ETL工具、數據質量平臺、數據標準平臺、元數據管理平臺、數據資產與服務平臺、數據安全管理、標簽管理平臺、數據開發套件等的至少一種。
2)具備大數據存儲與計算框架的開發與使用經驗:如Hadoop、Hive、Yarn、Spark、Flink、Presto(Trino)、Iceberg、Hudi等的一種或多種。
3)熟悉數倉領域知識和設計經驗:如數倉建模方法、海量數據ETL開發、SQL使用與調優等,或具備數據挖掘經驗。
工作內容:
1、數據應用需求調研及分析,設計并挖掘大數據應用場景;
2、研究和規劃數據產品功能、服務及所需的業務流程,把握產品定位;
3、負責公司數據產品和數據平臺的搭建。跟蹤、分析、挖掘業務部門的數據需求,結合公司整體的業務規劃,進行需求評估;
4、對業務數據進行分析與挖掘,設計業務模型,探查業務增長點,提交業務增長方案建議 ;