1.負責大數(shù)據(jù)平臺hadoop數(shù)據(jù)采集架構搭建及數(shù)據(jù)采集:
2.負責ETL第三方數(shù)據(jù)對接平臺開發(fā)、大數(shù)據(jù)關聯(lián)分析、預測算法編寫
招聘要求:
1、學歷:本科以上
2、專業(yè):計算機相關專業(yè)
3、工作經(jīng)驗:3年以上
4、熟練搭建hadoop+spark,F(xiàn)link生態(tài)下離線或在線數(shù)倉,熟練操作sqoop、hive、Flume+kafka、zookeeper、Hbase、Flink、zabbix組件;熟練應用SparkRDD、Sparkmlib或Sklearn庫中機器學習模型訓練,熟練使用linux系統(tǒng)腳本、docker技術自動化部署生產環(huán)境,熟悉各組件運維管理。
5、精通python\Java等開發(fā)語言:
精通前沿開發(fā)技術、技術框架,應用服務器數(shù)據(jù)庫技術,對技術有前瞻性;技術扎實,代碼格優(yōu)雅,邏輯思維清晰,具備良好的業(yè)務抽象能有闊的技術視野,精通主流開源框架springcloud,spirngboot,vue,熟悉Linux命令,shell腳本,有較好的數(shù)據(jù)庫設計和調優(yōu)能力,了解前端主流框架的優(yōu)劣勢與選型精通0racle、Sqlserver,mysql等數(shù)據(jù)庫開發(fā),了解存儲遠程,函數(shù)等開發(fā)及測試手段:
6、具備良好的系統(tǒng)分析設計能力、解決問題能力和較強的學習能力,具有很強的問題分析定位能力及系統(tǒng)調優(yōu)能力
7、熟悉Maven、SVN、Git等版本和項目管理工具:
8、良好的溝通與表達能力,思維邏輯縝密,具備一定的問題分析能力。
9、有敏捷開發(fā)經(jīng)驗、大數(shù)據(jù)人工智能等項目經(jīng)驗者優(yōu)先