一、崗位職責(zé):
1.基于華為 MRS 大數(shù)據(jù)平臺開展組件的日常使用,包括但不限于Hadoop 生態(tài)鏈組件、spark2.X、flink、hudi、hetu 引擎、clickhouse、kafka、flume、loader、Redis 的使用維護操作。
2.基于現(xiàn)有業(yè)務(wù)進行MRS 平臺的定制化與組件二次開發(fā),包含離線,實時,微批等數(shù)據(jù)流架構(gòu)。
3.依托 MRS 平臺運維界面,完成組件服務(wù)的添加、刪除、修改重啟,巡檢及服務(wù)規(guī)模的容量及計算資源調(diào)整等操作。需要配合平臺的擴容、升級、數(shù)據(jù)遷移,組件規(guī)劃等操作。
二、任職要求:中級
1、碩士及以上學(xué)歷。具備華為大數(shù)據(jù)HCIP證書,1年以上大數(shù)據(jù)等相關(guān)應(yīng)用、運維經(jīng)驗。
2、熟悉 Linux 系統(tǒng),能對系統(tǒng)的基本問題進行分析、解決。
3、熟悉一種數(shù)據(jù)庫(MySQL、Postgresql等),對數(shù)據(jù)庫的常見問題進行分析、解決。
4、熟悉 Docker,對容器的常見問題進行分析、解決。
5、優(yōu)秀的溝通和協(xié)作能力,能負(fù)責(zé)現(xiàn)場的運維相關(guān)工作。
6、熟悉安全生產(chǎn)相關(guān)規(guī)定并遵守。
7、具備技術(shù)文檔撰寫能力。
8、熟悉 Hadoop/Kafka/Impala/Hbase/zookeeper等開源產(chǎn)品,具備其中一種或者多種產(chǎn)品大規(guī)模集群運維實操經(jīng)驗;有華為大數(shù)據(jù)產(chǎn)品運維經(jīng)驗者優(yōu)先考慮。