一、崗位職責:
1.基于華為 MRS 大數據平臺開展組件的日常使用,包括但不限于Hadoop 生態鏈組件、spark2.X、flink、hudi、hetu 引擎、clickhouse、kafka、flume、loader、Redis 的使用維護操作。
2.基于現有業務進行MRS 平臺的定制化與組件二次開發,包含離線,實時,微批等數據流架構。
3.依托 MRS 平臺運維界面,完成組件服務的添加、刪除、修改重啟,巡檢及服務規模的容量及計算資源調整等操作。需要配合平臺的擴容、升級、數據遷移,組件規劃等操作。
二、任職要求:中級
1、碩士及以上學歷。具備華為大數據HCIP證書,1年以上大數據等相關應用、運維經驗。
2、熟悉 Linux 系統,能對系統的基本問題進行分析、解決。
3、熟悉一種數據庫(MySQL、Postgresql等),對數據庫的常見問題進行分析、解決。
4、熟悉 Docker,對容器的常見問題進行分析、解決。
5、優秀的溝通和協作能力,能負責現場的運維相關工作。
6、熟悉安全生產相關規定并遵守。
7、具備技術文檔撰寫能力。
8、熟悉 Hadoop/Kafka/Impala/Hbase/zookeeper等開源產品,具備其中一種或者多種產品大規模集群運維實操經驗;有華為大數據產品運維經驗者優先考慮。