崗位職責(zé):
1、負(fù)責(zé)各類項(xiàng)目中相關(guān)數(shù)據(jù)的業(yè)務(wù)梳理和需求分析,完成數(shù)據(jù)分析方案與匯聚入庫技術(shù)方案的制定,設(shè)計(jì)數(shù)據(jù)管理和操作流程;
2、負(fù)責(zé)各類項(xiàng)目中數(shù)據(jù)清洗、融合、轉(zhuǎn)換、分析及建模工作;
3、負(fù)責(zé)收集項(xiàng)目中數(shù)據(jù)分析處理需求,提煉數(shù)據(jù)分析及處理的通用工具集;
4、負(fù)責(zé)項(xiàng)目中的數(shù)據(jù)實(shí)施交付相關(guān)文檔的編寫工作;
崗位要求:
1、計(jì)算機(jī)、地理信息、數(shù)學(xué)、統(tǒng)計(jì)學(xué)等相關(guān)專業(yè),統(tǒng)招本科以上學(xué)歷,至少3年以上數(shù)據(jù)分析與開發(fā)崗位的經(jīng)驗(yàn);
2、熟悉大數(shù)據(jù)相關(guān)技術(shù),如Hadoop、Spark、Hbase等;熟練掌握關(guān)系型數(shù)據(jù)庫,Hadoop 生態(tài)組件(HDFS, YARN, Hive)等;熟悉Spark SQL,具備編寫復(fù)雜SQL語句和SQL性能優(yōu)化的能力。
3、至少精通java、python、scala其中一種腳本開發(fā)語言;
4、具備成熟的數(shù)據(jù)治理方法論,具備數(shù)據(jù)倉庫建設(shè)經(jīng)驗(yàn),包括數(shù)據(jù)清洗、ETL、質(zhì)量監(jiān)控和評(píng)估等實(shí)施經(jīng)驗(yàn);
5、具備良好的溝通協(xié)調(diào)能力,能夠與公司內(nèi)各部門及外部合作伙伴進(jìn)行有效的溝通和合作;
6、了解空間數(shù)據(jù)存儲(chǔ)、處理及分析工具的優(yōu)先,如ArcGIS、PostGIS、GeoTools、GDAL、Apache Sedona 等。