崗位職責(zé):
1.數(shù)據(jù)采集實(shí)施:負(fù)責(zé)多種數(shù)據(jù)源的數(shù)據(jù)采集,包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù);執(zhí)行數(shù)據(jù)采集計(jì)劃;對(duì)采集到的數(shù)據(jù)進(jìn)行清洗和預(yù)處理。
2.數(shù)據(jù)運(yùn)維管理:負(fù)責(zé)數(shù)據(jù)的備份、恢復(fù)、歸檔等管理工作,制定數(shù)據(jù)存儲(chǔ)的規(guī)范和標(biāo)準(zhǔn)。
3.數(shù)據(jù)架構(gòu)設(shè)計(jì)與實(shí)施:建立數(shù)據(jù)倉(cāng)庫(kù)指標(biāo)體系和分層架構(gòu),開發(fā)數(shù)據(jù)處理腳本和程序,實(shí)現(xiàn)數(shù)據(jù)的批量處理和實(shí)時(shí)處理。
4.數(shù)據(jù)建模設(shè)計(jì):負(fù)責(zé)設(shè)計(jì)和維護(hù)工業(yè)互聯(lián)網(wǎng)相關(guān)的數(shù)據(jù)模型,包括概念模型、邏輯模型和物理模型。
5.數(shù)據(jù)服務(wù)實(shí)施:負(fù)責(zé)與其他系統(tǒng)進(jìn)行數(shù)據(jù)集成,開發(fā)數(shù)據(jù)接口,實(shí)現(xiàn)數(shù)據(jù)的共享和交換。
任職要求:
1.學(xué)歷及專業(yè)要求:本科及以上學(xué)歷,原則上“雙一流”高校計(jì)算機(jī)、軟件工程、數(shù)據(jù)科學(xué)與大數(shù)據(jù)技術(shù)、物聯(lián)網(wǎng)工程、自動(dòng)化等相關(guān)專業(yè)。
2.崗位經(jīng)驗(yàn):3年以上相關(guān)工作經(jīng)驗(yàn)。
3.專業(yè)技能:熟練掌握 ETL 工具或編程語(yǔ)言(Python/Java/Scala),具備數(shù)據(jù)抽取、轉(zhuǎn)換、加載的實(shí)戰(zhàn)經(jīng)驗(yàn);熟悉關(guān)系型數(shù)據(jù)庫(kù)(MySQL/Oracle)、NoSQL(HBase/MongoDB)、數(shù)據(jù)倉(cāng)庫(kù)(Hive/Redshift)、分布式存儲(chǔ)架構(gòu)(HDFS/Ceph)等存儲(chǔ)技術(shù),了解數(shù)據(jù)庫(kù)設(shè)計(jì)、管理與優(yōu)化、數(shù)據(jù)庫(kù)備份與恢復(fù);熟悉SQL、HQL等數(shù)據(jù)庫(kù)編程語(yǔ)言、數(shù)據(jù)倉(cāng)庫(kù)管理工具,具備熟練分析SQL語(yǔ)句性能,精通DB索引、分表等優(yōu)化措施設(shè)計(jì)和實(shí)施的能力;掌握接口開發(fā)框架(如 Spring Boot、Django),能編寫高效、穩(wěn)定的數(shù)據(jù)接口。
4.溝通協(xié)作及能力要求:能夠與開發(fā)團(tuán)隊(duì)、產(chǎn)品經(jīng)理等有效溝通,準(zhǔn)確理解需求并反饋問題;具備良好的團(tuán)隊(duì)協(xié)作精神,能夠與團(tuán)隊(duì)成員緊密合作,共同解決問題;具備較強(qiáng)的邏輯思維和問題解決能力,能夠快速定位和復(fù)現(xiàn)問題。