崗位職責(zé):
1.負責(zé)大數(shù)據(jù)計算平臺構(gòu)建和大數(shù)據(jù)應(yīng)用研發(fā);
2.負責(zé)基于分布式計算框架的開發(fā).處理.分析.統(tǒng)計.挖掘工作;
3.負責(zé)大數(shù)據(jù)平臺新技術(shù)的探索和實踐,研究行業(yè)前沿技術(shù);
4.主導(dǎo)并參與離線/實時數(shù)倉的設(shè)計和搭建;
5.負責(zé)公司現(xiàn)有大數(shù)據(jù)平臺的維護,以及倉庫作業(yè)優(yōu)化、開發(fā);
6.構(gòu)建復(fù)雜數(shù)據(jù)分析模型,對海量數(shù)據(jù)進行分析和挖掘,為公司決策提供數(shù)據(jù)支持,跟進大數(shù)據(jù)技術(shù)發(fā)展趨勢。
崗位要求:
1.本科及以上學(xué)歷,計算機.軟件工程等相關(guān)專業(yè);
2.有扎實的數(shù)據(jù)結(jié)構(gòu)和算法功底,熟悉分布式計算的框架和原理,具備一定的統(tǒng)計機器學(xué)習(xí).數(shù)據(jù)挖掘基礎(chǔ);
3.熟悉Java.Scala或Python開發(fā)語言;熟練使用Linux/Unix等操作系統(tǒng);
4.了解常見大數(shù)據(jù)存儲與計算分析相關(guān)組件的內(nèi)部原理,如Hadoop.Hive.Spark.Kafka.Doris等,熟練使用Hive sql語言編寫程序;
5.有大數(shù)據(jù)應(yīng)用開發(fā).優(yōu)化或解決大數(shù)據(jù)組件問題的經(jīng)驗更好,有開源社區(qū)代碼貢獻者優(yōu)先;
6.具備優(yōu)秀的邏輯思維能力;有強烈的上進心和求知欲,善于學(xué)習(xí)新事物,主動擔(dān)責(zé),攻堅破難;具備良好的團隊合作精神,善于溝通。