崗位職責:1、根據公司及數據產品部門的業務要求,撰寫技術實現方案,參與技術調研與選型;2、負責項目的開發規劃、編碼實現相關工作;3、負責基于Spark技術的海量數據的處理、分析、統計、挖掘工作;4、根據需求使用SparkStreaming和SparkSQL進行數據處理/查詢/統計任職要求:1、3年以上scala開發經驗,3年以上java開發經驗。2、熟悉scala或java開發語言,扎實的算法和編程功底。3、對Spark及MR計算模型的原理和底層技術有一定深入,及時跟蹤和了解開源分布式計算存儲相關技術(Yarn,hbase,kafka等)。4、有海量數據處理開發經驗,機器學習相關實踐者優先5、誠實守信,有擔當,有強烈的責任心和團隊合作精神。
舉報
舉報






