崗位職責
1.協助項目經理/獨立完成項目開發
2.負責公司數據產品的數據采集,清洗,加工及統計分析,以及數據處理功能的開發,編寫相關文檔
3.參與數據映射數據質量分析數據差異分析
4.負責公司數據產品功能開發;
5. 完成上級臨時交付的工作任務
專業技能要求:
1.2年以上數據倉庫項目實施經驗,獨立完成數據處理開發工作,負責過一個完整項目;
2.熟練使用Flink開發實時計算任務,具備基于DolphinScheduler搭建復雜工作流調度系統的實戰經驗;
3.熟悉ETL開發,熟悉Apache Hudi數據湖架構設計與優化;
4.熟練使用數據采集和接收工具,熟練使用flume+kafka優先;
5.熟悉Hadoop生態圈技術,具有源碼閱讀及二次開發工作經驗;
6.熟練使用SQL,熟悉數據庫原理,熟悉mysql;
7.熟悉Linux操作系統,熟練使用常用命令,熟練使用shell腳本;
8.熟練使用高性能緩存工具,熟練使用redis優先;
9.具有清晰的系統思維邏輯,對解決行業實際問題有濃厚興趣,良好的溝通協調能力及學習能力。
舉報
1.協助項目經理/獨立完成項目開發
2.負責公司數據產品的數據采集,清洗,加工及統計分析,以及數據處理功能的開發,編寫相關文檔
3.參與數據映射數據質量分析數據差異分析
4.負責公司數據產品功能開發;
5. 完成上級臨時交付的工作任務
專業技能要求:
1.2年以上數據倉庫項目實施經驗,獨立完成數據處理開發工作,負責過一個完整項目;
2.熟練使用Flink開發實時計算任務,具備基于DolphinScheduler搭建復雜工作流調度系統的實戰經驗;
3.熟悉ETL開發,熟悉Apache Hudi數據湖架構設計與優化;
4.熟練使用數據采集和接收工具,熟練使用flume+kafka優先;
5.熟悉Hadoop生態圈技術,具有源碼閱讀及二次開發工作經驗;
6.熟練使用SQL,熟悉數據庫原理,熟悉mysql;
7.熟悉Linux操作系統,熟練使用常用命令,熟練使用shell腳本;
8.熟練使用高性能緩存工具,熟練使用redis優先;
9.具有清晰的系統思維邏輯,對解決行業實際問題有濃厚興趣,良好的溝通協調能力及學習能力。
舉報
溫馨提示
- 你可能感興趣的職位
- 最近瀏覽記錄
-
面議
-
3.8-8K/月
-
面議
-
面議
-
面議
-
面議
-
面議
-
面議
暫沒有相關信息
- 所屬行業:互聯網/電子商務
- 所在地區:廣東-深圳市
- 聯系人:
- 手機:會員登錄后才可查看
- 郵箱:會員登錄后才可查看
- 郵政編碼:
工作地址
- 地址:深圳市福田區深南大道7006號萬科富春東方大廈1607






