任職要求:
本科及以上學(xué)歷,計(jì)算機(jī)、軟件工程等相關(guān)專業(yè)。
熟悉 ClickHouse、MPP 等分布式數(shù)據(jù)庫(kù)的應(yīng)用及優(yōu)化,有實(shí)際項(xiàng)目經(jīng)驗(yàn)。
熟悉數(shù)據(jù)處理與存儲(chǔ)技術(shù),能夠設(shè)計(jì)和實(shí)現(xiàn)高效的批量數(shù)據(jù)處理與實(shí)時(shí)數(shù)據(jù)計(jì)算。
熟悉實(shí)時(shí) ETL 流程的設(shè)計(jì)與實(shí)施,能夠處理大數(shù)據(jù)量的實(shí)時(shí)數(shù)據(jù)流。
熟練使用 SQL 和 Python 等編程語(yǔ)言,有較強(qiáng)的編程能力和調(diào)試技能。
熟悉數(shù)據(jù)中臺(tái)架構(gòu)、數(shù)據(jù)倉(cāng)庫(kù)等技術(shù),能夠進(jìn)行數(shù)據(jù)集成和清洗。
良好的團(tuán)隊(duì)合作與溝通能力,具有較強(qiáng)的責(zé)任心和自我驅(qū)動(dòng)力。
崗位職責(zé):
負(fù)責(zé)數(shù)據(jù)平臺(tái)的開(kāi)發(fā)與維護(hù),處理大規(guī)模數(shù)據(jù)的存儲(chǔ)、處理和查詢。
使用 ClickHouse 等 MPP 數(shù)據(jù)庫(kù)進(jìn)行批量數(shù)據(jù)處理與存儲(chǔ)優(yōu)化。
設(shè)計(jì)和實(shí)現(xiàn)高效的實(shí)時(shí) ETL 流程,保證數(shù)據(jù)的實(shí)時(shí)性與準(zhǔn)確性。
構(gòu)建實(shí)時(shí)計(jì)算架構(gòu),支持實(shí)時(shí)數(shù)據(jù)的分析與決策。
編寫(xiě)高效的 SQL 查詢,優(yōu)化數(shù)據(jù)存儲(chǔ)和查詢性能,確保數(shù)據(jù)的高效存取。
配合數(shù)據(jù)分析團(tuán)隊(duì),提供高質(zhì)量的業(yè)務(wù)數(shù)據(jù)支持。
保證數(shù)據(jù)處理過(guò)程的穩(wěn)定性、準(zhǔn)確性、可擴(kuò)展性,并參與技術(shù)方案的優(yōu)化與實(shí)現(xiàn)。