崗位職責:1.負責大數據平臺的搭建、發布部署及相關維護工作;2.負責系統的運維和主動預防,搭建監控機制以及及時發現集群問題,持續提升系統可用性與穩定性;3.跟進并處理系統事件,對系統問題及故障解決跟蹤優化,負責服務狀況與服務質量報告,不斷提升集群服務質量;4.梳理優化業務使用集群的流程和規范,使集群使用在資源利用、質量等方面均達到較高水平;5.日常跟蹤業界技術發展動態,并結合業務發展需求,研究引入合適的技術。任職要求:1.3年以上中等規模集群環境下的Hadoop/Impala/Hive/Spark集群相關運維經驗;2.對各種HDFS/Yarn/Hive/Impala/Spark/Hbase等相關參數調優, 性能優化等有實際經驗;3.有實際踩坑經歷, 對于相關組件的版本跟進, 補丁跟蹤, bug追蹤等有相關經驗;4.了解如何處理過各種集群在線版本升級, 數據遷移, 集群擴容, 穩定性監控等工作;5.了解計算機網絡,熟悉linux,熟悉shell、perl或python等語言;6.熟悉Oracle數據庫技術,熟悉Data Stage等ETL工具優先;7.熟悉中間件技術,如KafKa、weblogic、MQ等技術;8.積極主動、學習能力強、溝通能力強、肯吃苦耐勞;
舉報
舉報
大數據開發工程師職業大全:
- 所在地區:廣東-深圳市
- 聯系人:薛小姐
- 手機:會員登錄后才可查看
- 郵箱:會員登錄后才可查看
- 郵政編碼:
工作地址
- 地址:深圳市福田區天安數碼城天祥大廈AB座10A 、5B2






