職位描述
該職位還未進行加V認證,請仔細了解后再進行投遞!
職位描述:
1.負責線上大數據集群的日常運維、監控預警,保證穩定性、安全性;
2.負責大數據集群的搭建和后續維護;
3.負責解決線上大數據技術及運維相關的問題;
崗位要求
1.熟悉大數據產品生態圈,熟悉基于hadoop生態(hbase、hdfs、spark、kafka等)
2. 熟悉大規模數據處理、分布式計算等相關技術,如Hadoop 、Hive、Spark、MapReduce等更佳。
3. 熟悉HDFS、 HIVE、 KAFKA、ZOOKEEPER、 SPARK、FLINK等大數據軟件體系架構及源碼,了解核心組件內部原理。
4. 有大數據系統項目經驗,有海量數據處理和分析經驗,了解如何搭建分布式處理系統。
5. 熟悉實時計算引擎,掌握Spark、Flink等至少一個實時組件開發、部署、性能調優。
6. 了解云原生技術,對k8S,Docker等有實際的項目經驗,對微服務架構有一定的實踐經驗
7. 有基于大數據平臺的數據治理、 作業調度、大數據開發套件等大數據平臺應用組件的設計開發經驗優先
8. 熟悉數據資產管理思想,如:元數據管理、數據血線、指標管理、數據質量、數據安全等,有實際的產品落地經驗者優先
工作地點
地址:上海浦東新區上海-浦東新區百安居(龍陽店)


職位發布者
HR
百安居

-
家居·室內設計·裝潢
-
21-50人
-
中外合資(合資·合作)
-
淀山湖大道851號萬達茂一樓百安居