国产一区二区免费,翔田千里AV,无码电影,红杏亚洲影院一区二区三区,国产精品欧美激情

崗位職責(zé)： 1、負(fù)責(zé)公司大數(shù)據(jù)平臺的搭建、運維和管理，包括Hadoop平臺及其相關(guān)組件、ETL工具和BI工具，確保平臺高效運轉(zhuǎn)、系統(tǒng)穩(wěn)定性和安全性。 2、參與全鏈路數(shù)據(jù)開發(fā)，包括數(shù)據(jù)采集、數(shù)據(jù)同步、數(shù)據(jù)清洗與標(biāo)準(zhǔn)化、數(shù)據(jù)模型設(shè)計、離線數(shù)據(jù)和實時數(shù)據(jù)開發(fā)、數(shù)據(jù)服務(wù)化、可視化和數(shù)據(jù)治理等工作。 3、負(fù)責(zé)多源數(shù)據(jù)（文件，mysql，mongodb，API，日志，kafka等）接入，標(biāo)準(zhǔn)化清洗轉(zhuǎn)換接入大數(shù)據(jù)平臺 4、參與公司離線和實時數(shù)據(jù)倉庫設(shè)計與開發(fā)，根據(jù)業(yè)務(wù)需求進(jìn)行數(shù)據(jù)倉庫模型設(shè)計，負(fù)責(zé)從ETL到BI到全流程大數(shù)據(jù)作業(yè)的開發(fā)。 崗位要求： 1、三年以上大數(shù)據(jù)開發(fā)經(jīng)驗，熟悉主流大數(shù)據(jù)處理技術(shù)，具備豐富的分布式計算平臺模型架構(gòu)經(jīng)驗，包括Hadoop、Hive、HBase、Spark/Flink、Sqoop、Flume、Kafka、ZooKeeper、Elasticsearch等。 2、代碼能力強、掌握Python/Java等開發(fā)語言一種以上，熟悉Linux系統(tǒng)及常規(guī)shell命令； 3、具備優(yōu)秀的問題分析能力，能夠準(zhǔn)確快速地定位和解決系統(tǒng)、應(yīng)用日志中的問題。 4、有在云上獨立搭建大數(shù)據(jù)平臺能力 5、有處理億級以上數(shù)據(jù)量經(jīng)驗優(yōu)先。