職位描述:
1.負(fù)責(zé)公司數(shù)據(jù)和業(yè)務(wù)平臺的系統(tǒng)架構(gòu)、方案設(shè)計;
2.深入理解業(yè)務(wù)需求,對業(yè)務(wù)建模,設(shè)計系統(tǒng)架構(gòu),滿意業(yè)務(wù)需求;
3.負(fù)責(zé)大數(shù)據(jù)相關(guān)定制服務(wù)核心功能代碼編寫;
4.技術(shù)難題攻關(guān),持續(xù)提升核心系統(tǒng)性能,保證系統(tǒng)的安全、穩(wěn)定、快速運行;
職位要求:
1.有面相業(yè)務(wù)處理海量數(shù)據(jù)架構(gòu)的項目經(jīng)歷;有大型企業(yè)大數(shù)據(jù)相關(guān)項目架構(gòu)設(shè)計者優(yōu)先;
2.熟識整個大數(shù)據(jù)的完整處理流程,包括各種數(shù)據(jù)源各種格式的數(shù)據(jù)的采集、清洗、預(yù)處理、存儲、分析挖據(jù)、機器學(xué)習(xí)和數(shù)據(jù)可視化;
3.深刻理解大數(shù)據(jù)處理(分布式計算、內(nèi)存計算、流計算、圖數(shù)據(jù)庫大規(guī)模并行處理數(shù)據(jù)庫等)相關(guān)技術(shù)和實現(xiàn)方法有架構(gòu)和設(shè)計實踐經(jīng)驗;
4.熟識Hadoop、Spark、YARN、MapReduce、 Impala、Flume、Kafaka等大數(shù)據(jù)平臺和開源軟件,有實際項目架構(gòu)經(jīng)驗;
5.對關(guān)系型與非關(guān)系型數(shù)據(jù)庫與數(shù)據(jù)存儲均具有特別深刻的理解,能夠嫻熟使用常用數(shù)據(jù)庫,并理解不同數(shù)據(jù)庫產(chǎn)品的特性區(qū)分,包括但不限于:HDFS/ HBase/Mongo/Redis/MySQL
6.3年及以上相關(guān)工作經(jīng)驗,有制造行業(yè)尤其是輪胎制造行業(yè)數(shù)據(jù)倉庫經(jīng)驗者優(yōu)先
必備技能點:①需要會java scala,②需要有操作數(shù)據(jù)中臺實時項目,比如flink、spark streaming等