職位描述
數(shù)據(jù)倉庫PythonHadoopSpark
職責(zé)：
1. 負(fù)責(zé)從多種數(shù)據(jù)源（數(shù)據(jù)庫、API、日志等）采集數(shù)據(jù)，并進(jìn)行清洗、轉(zhuǎn)換和加載（ETL）。
2. 使用公司產(chǎn)品或開源工具如Apache Kafka、Flume、Logstash、Flink等進(jìn)行實時或批量數(shù)據(jù)處理。
3. 優(yōu)化數(shù)據(jù)存儲和查詢性能。
4. 基于Hadoop、Spark、Flink等分布式計算框架開發(fā)數(shù)據(jù)處理流程。
5. 優(yōu)化ETL作業(yè)，提升數(shù)據(jù)處理效率，確保系統(tǒng)高可用性。
6. 參與指標(biāo)體系、數(shù)據(jù)倉庫、數(shù)據(jù)湖的構(gòu)建與優(yōu)化，設(shè)計合理的數(shù)據(jù)分層模型，并參與數(shù)據(jù)可視化與業(yè)務(wù)洞察分析。
7. 設(shè)計數(shù)據(jù)質(zhì)量校驗規(guī)則及異常告警機(jī)制，建立和優(yōu)化數(shù)據(jù)治理流程。
要求：
1. 計算機(jī)、大數(shù)據(jù)等理工科相關(guān)專業(yè)。
2. 熟悉SQL編程及數(shù)據(jù)庫原理，具備復(fù)雜SQL編寫及性能優(yōu)化能力，熟悉OLAP引擎（如ClickHouse/Doris）。
3. 精通至少一種編程語言（Python、Java、Scala）。
4. 熟悉大數(shù)據(jù)生態(tài)（Hadoop、Spark、Hive、Kafka、Flink等）。
5. 有ETL開發(fā)經(jīng)驗，熟悉主流ETL工具者優(yōu)先。
6. 2年以上大數(shù)據(jù)開發(fā)或數(shù)據(jù)工程相關(guān)經(jīng)驗，有從MES、SAP系統(tǒng)數(shù)據(jù)取數(shù)經(jīng)驗者優(yōu)先。
7. 良好的邏輯分析能力、問題排查能力，團(tuán)隊協(xié)作精神，能適應(yīng)高強(qiáng)度工作。
查看全部
工作地點(diǎn)
東莞立訊精密工業(yè)有限公司
相似職位
- 大數(shù)據(jù)開發(fā)1-1.5萬
東莞
軟通動力信息技術(shù)(集團(tuán))股份有限公司 - 數(shù)據(jù)開發(fā)工程師1.2-1.6萬
東莞
普聯(lián)軟件股份有限公司 東莞
亞信科技(中國)有限公司- 急聘數(shù)據(jù)開發(fā)工程師1.3-1.6萬
東莞
京北方 - 數(shù)據(jù)開發(fā)1.1-1.6萬
東莞
軟通動力信息技術(shù)(集團(tuán))股份有限公司 - 數(shù)據(jù)開發(fā)工程師1-1.5萬
東莞
軟通動力信息技術(shù)(集團(tuán))股份有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
郭女士/招聘主管
昨日活躍立即溝通
深圳市法本信息技術(shù)股份有限公司
深圳市法本信息技術(shù)股份有限公司——高速成長的軟件科技企業(yè)公司簡介法本公司成立于2006年，總部位于深圳市南山區(qū)高新產(chǎn)業(yè)園區(qū)，已在北京、上海、廣州和香港設(shè)立分公司；現(xiàn)有員工約10,000人以上。目前已獲得國家高新技術(shù)企業(yè)認(rèn)證、深圳市高新技術(shù)企業(yè)認(rèn)證、雙軟認(rèn)證和CMMI Level3認(rèn)證等。公司立足于深圳，是一家面向中國大陸、香港及海外市場的電子元器件通路、專業(yè)IT服務(wù)和咨詢的多元化集團(tuán)企業(yè)：上海法本電子科技有限公司，深圳市法本信息技術(shù)有限公司和深圳法本科技有限公司。深圳市法本信息技術(shù)有限公司成立于2006年，致力于成為全球領(lǐng)先的專業(yè)IT產(chǎn)品、服務(wù)及解決方案供應(yīng)商；為國內(nèi)外互聯(lián)網(wǎng)企業(yè)、金融系統(tǒng)、通信企業(yè)、高科技領(lǐng)域、教育事業(yè)及能源領(lǐng)域提供資源外包和解決方案服務(wù)。人才理念以人為本，尊重員工的個性與發(fā)展，使員工在平等、競爭、和諧的環(huán)境下充分發(fā)揮自身的創(chuàng)新能力和潛能，在達(dá)成公司發(fā)展目標(biāo)的同時實現(xiàn)個人的理想和奮斗目標(biāo)。核心價值觀真誠、用心、創(chuàng)造、分享、開放。合作伙伴自2006年以來，法本信息一直致力于為客戶提供優(yōu)質(zhì)的IT咨詢、解決方案以及外包服務(wù)，在互聯(lián)網(wǎng)、金融、通信、高科技、教育、能源等領(lǐng)域積累了豐富的行業(yè)經(jīng)驗，目前已與騰訊、百度、工商銀行、招商銀行、平安、中國移動、華為、中興通訊等大型企業(yè)和機(jī)構(gòu)建立了合作關(guān)系。隨著公司的高速發(fā)展，我們期盼著更多優(yōu)秀的人才加盟。公司已建立科學(xué)的培訓(xùn)、激勵和晉升機(jī)制，保障專業(yè)人才個人與公司共同健康發(fā)展。我們將凝聚優(yōu)秀的人才，共同鑄就事業(yè)的輝煌！公司相關(guān)福利： 1)5天8小時工作制； 2)入職即購買養(yǎng)老保險、醫(yī)療保險、工傷保險、失業(yè)險、生育險和住房公積金； 3)有市場競爭力的薪酬水平，公司還設(shè)立了公司發(fā)展獎、項目獎、合理化建議獎、長期服務(wù)獎等； 4)帶薪年假：試用期屆滿，即可享受年假； 5)根據(jù)公司當(dāng)年經(jīng)營情況提供長于國家規(guī)定的春節(jié)假期； 6)結(jié)婚、生育正常假期，公司饋贈禮金； 7)定期組織年度體檢； 8)每月舉行生日Party、員工座談會，季度民主生活會等； 9)定期組織羽毛球、籃球和旅游等文娛活動。
公司主頁