崗位職責(zé):1.協(xié)助項(xiàng)目經(jīng)理/獨(dú)立完成項(xiàng)目開(kāi)發(fā)
2.負(fù)責(zé)公司數(shù)據(jù)產(chǎn)品的數(shù)據(jù)采集,清洗,加工及統(tǒng)計(jì)分析,以及數(shù)據(jù)處理功能的開(kāi)發(fā),編寫(xiě)相關(guān)文檔
3.參與數(shù)據(jù)映射、數(shù)據(jù)質(zhì)量分析、數(shù)據(jù)差異分析
4.負(fù)責(zé)公司數(shù)據(jù)產(chǎn)品功能開(kāi)發(fā);
5. 完成上級(jí)臨時(shí)交付的工作任務(wù)
任職資格:1.2年以上數(shù)據(jù)倉(cāng)庫(kù)項(xiàng)目實(shí)施經(jīng)驗(yàn),獨(dú)立完成數(shù)據(jù)處理開(kāi)發(fā)工作,負(fù)責(zé)過(guò)一個(gè)完整項(xiàng)目;
2.熟練使用Flink開(kāi)發(fā)實(shí)時(shí)計(jì)算任務(wù),具備基于DolphinScheduler搭建復(fù)雜工作流調(diào)度系統(tǒng)的實(shí)戰(zhàn)經(jīng)驗(yàn);
3.熟悉ETL開(kāi)發(fā),熟悉Apache Hudi數(shù)據(jù)湖架構(gòu)設(shè)計(jì)與優(yōu)化;
4.熟練使用數(shù)據(jù)采集和接收工具,熟練使用flume+kafka優(yōu)先;
5.熟悉Hadoop生態(tài)圈技術(shù),具有源碼閱讀及二次開(kāi)發(fā)工作經(jīng)驗(yàn);
6.熟練使用SQL,熟悉數(shù)據(jù)庫(kù)原理,熟悉mysql;
7.熟悉Linux操作系統(tǒng),熟練使用常用命令,熟練使用shell腳本;
8.熟練使用高性能緩存工具,熟練使用redis優(yōu)先;
9.具有清晰的系統(tǒng)思維邏輯,對(duì)解決行業(yè)實(shí)際問(wèn)題有濃厚興趣,良好的溝通協(xié)調(diào)能力及學(xué)習(xí)能力。
職位類(lèi)別:
其他
舉報(bào)