職位描述
數(shù)據(jù)架構(gòu)JavaPythonFlinkHadoop數(shù)據(jù)庫(kù)開(kāi)發(fā)
職位概述
具備大數(shù)據(jù)處理經(jīng)驗(yàn)的Java開(kāi)發(fā)工程師，專(zhuān)注于Flink流處理框架的開(kāi)發(fā)和優(yōu)化。
能夠設(shè)計(jì)、實(shí)現(xiàn)和維護(hù)基于Flink的大數(shù)據(jù)處理管道。
同時(shí)熟練掌握Hadoop生態(tài)系統(tǒng)、MySQL數(shù)據(jù)庫(kù)和Elasticsearch技術(shù)棧。
具備大數(shù)據(jù)處理經(jīng)驗(yàn)的Java開(kāi)發(fā)工程師，專(zhuān)注于Flink流處理框架的開(kāi)發(fā)和優(yōu)化。
能夠設(shè)計(jì)、實(shí)現(xiàn)和維護(hù)基于Flink的大數(shù)據(jù)處理管道。
同時(shí)熟練掌握Hadoop生態(tài)系統(tǒng)、MySQL數(shù)據(jù)庫(kù)和Elasticsearch技術(shù)棧。
核心技能要求
Flink技術(shù)棧
熟練掌握Flink流處理API（DataSet/DataStream）
能夠?qū)崿F(xiàn)復(fù)雜事件處理（CEP）和窗口操作
具備Flink作業(yè)調(diào)優(yōu)和故障排查經(jīng)驗(yàn)
熟悉Flink與Kafka的集成開(kāi)發(fā)
Flink技術(shù)棧
熟練掌握Flink流處理API（DataSet/DataStream）
能夠?qū)崿F(xiàn)復(fù)雜事件處理（CEP）和窗口操作
具備Flink作業(yè)調(diào)優(yōu)和故障排查經(jīng)驗(yàn)
熟悉Flink與Kafka的集成開(kāi)發(fā)
Java開(kāi)發(fā)能力
JVM調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先
精通集合框架、多線(xiàn)程編程和IO操作
熟悉設(shè)計(jì)模式在分布式系統(tǒng)中的應(yīng)用
具備良好的代碼規(guī)范和單元測(cè)試習(xí)慣
JVM調(diào)優(yōu)經(jīng)驗(yàn)優(yōu)先
精通集合框架、多線(xiàn)程編程和IO操作
熟悉設(shè)計(jì)模式在分布式系統(tǒng)中的應(yīng)用
具備良好的代碼規(guī)范和單元測(cè)試習(xí)慣
Hadoop生態(tài)系統(tǒng)
掌握HDFS文件系統(tǒng)操作
熟悉YARN資源管理機(jī)制
掌握HDFS文件系統(tǒng)操作
熟悉YARN資源管理機(jī)制
數(shù)據(jù)庫(kù)技術(shù)
精通MySQL數(shù)據(jù)庫(kù)設(shè)計(jì)和優(yōu)化
能夠編寫(xiě)復(fù)雜SQL查詢(xún)和存儲(chǔ)過(guò)程
了解分庫(kù)分表策略和讀寫(xiě)分離方案
精通MySQL數(shù)據(jù)庫(kù)設(shè)計(jì)和優(yōu)化
能夠編寫(xiě)復(fù)雜SQL查詢(xún)和存儲(chǔ)過(guò)程
了解分庫(kù)分表策略和讀寫(xiě)分離方案
搜索技術(shù)
熟練使用Elasticsearch進(jìn)行全文檢索
能夠設(shè)計(jì)搜索索引和優(yōu)化查詢(xún)性能
掌握相關(guān)性評(píng)分和排序算法
熟練使用Elasticsearch進(jìn)行全文檢索
能夠設(shè)計(jì)搜索索引和優(yōu)化查詢(xún)性能
掌握相關(guān)性評(píng)分和排序算法
崗位職責(zé)
負(fù)責(zé)基于Flink的實(shí)時(shí)數(shù)據(jù)處理平臺(tái)開(kāi)發(fā)
設(shè)計(jì)并實(shí)現(xiàn)高吞吐、低延遲的數(shù)據(jù)處理管道
與數(shù)據(jù)倉(cāng)庫(kù)團(tuán)隊(duì)合作構(gòu)建ETL流程
優(yōu)化現(xiàn)有數(shù)據(jù)處理作業(yè)的性能和資源利用率
開(kāi)發(fā)數(shù)據(jù)質(zhì)量監(jiān)控和告警機(jī)制
負(fù)責(zé)基于Flink的實(shí)時(shí)數(shù)據(jù)處理平臺(tái)開(kāi)發(fā)
設(shè)計(jì)并實(shí)現(xiàn)高吞吐、低延遲的數(shù)據(jù)處理管道
與數(shù)據(jù)倉(cāng)庫(kù)團(tuán)隊(duì)合作構(gòu)建ETL流程
優(yōu)化現(xiàn)有數(shù)據(jù)處理作業(yè)的性能和資源利用率
開(kāi)發(fā)數(shù)據(jù)質(zhì)量監(jiān)控和告警機(jī)制
加分項(xiàng)
有容器化部署（Docker/K8s）經(jīng)驗(yàn)
熟悉CI/CD流水線(xiàn)建設(shè)
具備監(jiān)控系統(tǒng)（Prometheus/Grafana）使用經(jīng)驗(yàn)
有Python開(kāi)發(fā)能力
項(xiàng)目經(jīng)驗(yàn)要求
至少參與過(guò)1個(gè)完整的實(shí)時(shí)流處理項(xiàng)目
具備性能調(diào)優(yōu)和瓶頸定位的實(shí)際案例
有復(fù)雜數(shù)據(jù)處理邏輯的實(shí)現(xiàn)經(jīng)驗(yàn)
有容器化部署（Docker/K8s）經(jīng)驗(yàn)
熟悉CI/CD流水線(xiàn)建設(shè)
具備監(jiān)控系統(tǒng)（Prometheus/Grafana）使用經(jīng)驗(yàn)
有Python開(kāi)發(fā)能力
項(xiàng)目經(jīng)驗(yàn)要求
至少參與過(guò)1個(gè)完整的實(shí)時(shí)流處理項(xiàng)目
具備性能調(diào)優(yōu)和瓶頸定位的實(shí)際案例
有復(fù)雜數(shù)據(jù)處理邏輯的實(shí)現(xiàn)經(jīng)驗(yàn)
工作地點(diǎn)
北京朝陽(yáng)區(qū)建國(guó)路91號(hào)金地中心A座
相似職位
- 中級(jí)數(shù)據(jù)開(kāi)發(fā)工程師1.6-2萬(wàn)
北京 - 豐臺(tái)
盛和(北京)資訊科技有限公司 - 數(shù)據(jù)治理工程師1-2萬(wàn)
北京 - 朝陽(yáng)
金航數(shù)碼科技有限責(zé)任公司 - 數(shù)據(jù)開(kāi)發(fā)工程師1.2-2.4萬(wàn)
北京 - 西城
中機(jī)數(shù)科(北京)信息技術(shù)有限公司 - 大數(shù)據(jù)開(kāi)發(fā)工程師1.4-1.7萬(wàn)
北京 - 朝陽(yáng)
北京京孚信息技術(shù)有限公司 - 數(shù)據(jù)開(kāi)發(fā)工程師2-3.5萬(wàn)
北京 - 朝陽(yáng)
智聯(lián)招聘 - 數(shù)據(jù)處理工程師1-1.3萬(wàn)
北京 - 通州
河北起聘信息科技有限責(zé)任公司
熱門(mén)公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車(chē)招聘
- 蔚來(lái)招聘
- 東風(fēng)汽車(chē)招聘
- 長(zhǎng)城汽車(chē)招聘
- 奇瑞汽車(chē)招聘
- 理想汽車(chē)招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車(chē)招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
孫女士/人事行政主管
昨日活躍立即溝通
美通社美通社（PR Newswire）1954年開(kāi)創(chuàng)了企業(yè)新聞稿發(fā)布行業(yè)的先河，于2016年成為Cision旗下公司。在過(guò)去六十多年里，美通社不斷拓展，逐步打造了遍及全球一百七十多個(gè)國(guó)家、覆蓋著數(shù)十萬(wàn)家各類(lèi)傳統(tǒng)和新興的媒體的信息發(fā)布網(wǎng)絡(luò)。現(xiàn)在，美通社服務(wù)著全球七萬(wàn)多家企業(yè)和機(jī)構(gòu)，每天以四十多種語(yǔ)言，幫助客戶(hù)把他們的最新文字，圖片和視頻資訊發(fā)布給世界各地的目標(biāo)受眾，幫助他們和媒體，業(yè)界，投資者，有影響力人群以及普通公眾溝通，為他們提高知名度，打造品牌、推動(dòng)銷(xiāo)售，吸引投資。此外，美通社還提供全球媒體數(shù)據(jù)，監(jiān)測(cè)和分析服務(wù)，為客戶(hù)的傳播策略制定，效果評(píng)估，競(jìng)爭(zhēng)分析，公關(guān)危機(jī)等日常傳播工作提供數(shù)據(jù)，技術(shù)等專(zhuān)業(yè)支持。
公司主頁(yè)