崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)PaaS平臺(tái)組件部署、大數(shù)據(jù)數(shù)據(jù)中臺(tái)及應(yīng)用產(chǎn)品布署及日常維護(hù)(包括部署、升級(jí)、擴(kuò)容、遷移、排障等),熟悉hadoop、HBase、spark、Hive、Flink、kafka、Kerberos、Ranger、Elasticsearch、Redis等組件的技術(shù)原理和組件的配置及使用,有精通部分組件使用可優(yōu)先考慮;
2、使用prometheus、grafana進(jìn)行集群監(jiān)控部署;
3、負(fù)責(zé)K8s/Docker等容器化工具及doris運(yùn)維和布署;
4、負(fù)責(zé)大數(shù)據(jù)平臺(tái)相關(guān)組件、產(chǎn)品的巡檢、故障排除、數(shù)據(jù)備份等業(yè)務(wù),保證平臺(tái)及產(chǎn)品高效、穩(wěn)定運(yùn)行;
5、負(fù)責(zé)大數(shù)據(jù)平臺(tái)的安全漏洞加固及缺陷修復(fù);
6、負(fù)責(zé)大數(shù)據(jù)平臺(tái)運(yùn)維相關(guān)技術(shù)文檔的整理和維護(hù);
7、配合完成大數(shù)據(jù)平臺(tái)的方案編制、容量規(guī)劃,根據(jù)需求完成組件及產(chǎn)品升級(jí)。
【任職要求】
1、本科及以上學(xué)歷,5年及以上大數(shù)據(jù)運(yùn)維工作經(jīng)驗(yàn),有電信行業(yè)大數(shù)據(jù)平臺(tái)維護(hù)經(jīng)驗(yàn)優(yōu)先;
2、熟悉大數(shù)據(jù)平臺(tái)相關(guān)技術(shù),掌握python/shell等語言佳;
3、了解大數(shù)據(jù)平臺(tái)架構(gòu),具備常見問題的基本分析和解決能力,熟悉Haodop集群架構(gòu)及原理;
4、能夠進(jìn)行Linux操作系統(tǒng)的配置、管理及優(yōu)化,能夠獨(dú)立排查及解決操作系統(tǒng)層面的問題;
5、具備K8s/Docker等容器化布署經(jīng)驗(yàn)優(yōu)先,熟悉通過LVS/Keepalived/Nginx/Haproxy技術(shù)實(shí)現(xiàn)負(fù)載均衡;
6、熟悉Java,有Java項(xiàng)目開發(fā)經(jīng)驗(yàn)尤佳,有大數(shù)據(jù)后端開發(fā)經(jīng)驗(yàn)優(yōu)先考慮;
7、做事認(rèn)真負(fù)責(zé),自學(xué)能力較強(qiáng),有較強(qiáng)的書面與口頭溝通表達(dá)能力,獨(dú)立分析、解決問題的能力。
8、積極的處事心態(tài)和較強(qiáng)的抗壓能力。