崗位職責(zé):
1、負(fù)責(zé)大數(shù)據(jù)應(yīng)用產(chǎn)品的平臺搭建、架構(gòu)優(yōu)化、技術(shù)迭代和開發(fā)維護(hù),提供穩(wěn)定的大數(shù)據(jù)平臺服務(wù);構(gòu)建數(shù)據(jù)存儲、數(shù)據(jù)挖掘、數(shù)據(jù)計(jì)算及數(shù)據(jù)服務(wù)于一體的大型分布式數(shù)據(jù)平臺;
2、負(fù)責(zé)構(gòu)建和維護(hù)算法平臺,對海量數(shù)據(jù)進(jìn)行離線計(jì)算、實(shí)時(shí)計(jì)算等分析挖掘;協(xié)同數(shù)據(jù)分析師,根據(jù)業(yè)務(wù)場景設(shè)計(jì)并實(shí)現(xiàn)數(shù)據(jù)模型和服務(wù)模型,并跟進(jìn)和評估模型效果,確保算法和模型的有效落地;
3、持續(xù)學(xué)習(xí)了解大數(shù)據(jù)領(lǐng)域的新技術(shù),并結(jié)合實(shí)際需求落地;
任職要求
1、 學(xué)歷專業(yè):4-9年相關(guān)工作經(jīng)驗(yàn);
2、 有扎實(shí)的編程功底,熟悉常用的數(shù)據(jù)結(jié)構(gòu)和算法;
3、熟悉數(shù)據(jù)倉庫建模理論,有大數(shù)據(jù)整體系統(tǒng)架構(gòu)設(shè)計(jì)、數(shù)據(jù)ETL、建?;驍?shù)據(jù)分析相關(guān)經(jīng)驗(yàn);
4、熟悉常用的開源大數(shù)據(jù)技術(shù),如Hadoop、HBase、Flink、Kafka、Doris等,了解各組件的實(shí)現(xiàn)原理;
5、 有較強(qiáng)的 HSQL/SQL性能調(diào)優(yōu)經(jīng)驗(yàn),熟練使用相關(guān)開發(fā)語言(Python/Java/Scala/Shell等),熟練掌握Spark、flink任意一種計(jì)算框架,能閱讀源碼跟蹤問題;
6、 具備良好溝通能力和解決問題能力,善于從復(fù)雜的數(shù)據(jù)問題中找到關(guān)鍵路徑,對待工作認(rèn)真、負(fù)責(zé),有較強(qiáng)的自驅(qū)力。