職位描述
數(shù)據(jù)倉庫ETL數(shù)據(jù)中臺開發(fā)PythonJavaSqlHadoopFlinkSpark
大數(shù)據(jù)開發(fā)工程師
崗位職責
1. 數(shù)據(jù)建模與設(shè)計
運用維度建模/實體關(guān)系建模設(shè)計數(shù)倉邏輯與物理模型，適配業(yè)務(wù)需求
使用ER/Studio、PowerDesigner工具進行模型可視化設(shè)計與優(yōu)化
2. 數(shù)據(jù)開發(fā)與ETL流程構(gòu)建
基于Hive/Spark/Flink開發(fā)數(shù)據(jù)處理程序，優(yōu)化ETL流程
配置Informatica/Kettle工具，調(diào)度Azkaban/Oozie任務(wù)，保障數(shù)據(jù)一致性
3. SQL編寫與優(yōu)化
編寫復(fù)雜SQL查詢，優(yōu)化執(zhí)行計劃（索引/分區(qū)表/語句重構(gòu)）
管理數(shù)據(jù)庫對象（表/視圖/存儲過程），提升數(shù)據(jù)訪問效率
4. 大數(shù)據(jù)組件應(yīng)用與維護
部署維護Hadoop/Hive/Spark/Flink集群，調(diào)優(yōu)參數(shù)（HDFS/Spark內(nèi)存）
監(jiān)控組件運行狀態(tài)，協(xié)同運維團隊解決故障與性能問題
5. 業(yè)務(wù)理解與協(xié)作。深入理解業(yè)務(wù)流程，與業(yè)務(wù)部門協(xié)作提供數(shù)據(jù)解決方案
6. BI工具協(xié)作。適配Tableau/PowerBI數(shù)據(jù)模型，優(yōu)化BI工具數(shù)據(jù)呈現(xiàn)邏輯
職位要求
1.計算機相關(guān)專業(yè)本科及以上學(xué)歷
2.3年以上大數(shù)據(jù)開發(fā)經(jīng)驗，主導(dǎo)過≥2個復(fù)雜ETL項目
3.精通Hive/Spark/Flink，熟練使用Informatica/Kettle/Azkaban
- 掌握維度建模/實體關(guān)系建模方法，熟悉ER/Studio/PowerDesigner工具
- 熟練編寫復(fù)雜SQL，具備索引優(yōu)化/執(zhí)行計劃分析能力
4.邏輯思維嚴謹、問題解決能力強、跨部門協(xié)作高效
工作地點
上海黃浦區(qū)華旭國際大廈15層
相似職位
上海 - 浦東
上海藍載信息科技有限公司上海 - 黃浦
上海信息人才服務(wù)有限公司- 數(shù)據(jù)庫開發(fā)工程師8000-12000元
上海 - 浦東
北京新致君陽信息技術(shù)有限公司 上海
白象食品- 技術(shù)顧問1-1.5萬·13薪
上海 - 長寧
上?；樾畔⒖萍加邢薰?/span> 上海 - 普陀
上海中廣云證券咨詢有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
武夏炎/招聘主管
三日內(nèi)活躍立即溝通
上海倍通醫(yī)藥科技咨詢有限公司
倍通數(shù)據(jù)集團，2006年正式成立，是國內(nèi)早期為醫(yī)藥健康數(shù)據(jù)領(lǐng)域提供整體解決方案的創(chuàng)新型企業(yè)，下轄倍通醫(yī)藥科技、倍通醫(yī)療器械、倍通信用以及倍通管理平臺四家公司，擁有MNC渠道數(shù)據(jù)管理市場份額80%+，Top20內(nèi)資渠道數(shù)據(jù)管理市場份額60%+，穩(wěn)居業(yè)內(nèi)市場前列，行業(yè)終端主數(shù)據(jù)庫引領(lǐng)行業(yè)高標準。運營規(guī)模連續(xù)多年保持高速增長，并獲準參與多個國家部委、行業(yè)協(xié)會的數(shù)據(jù)管理、信用評級項目，現(xiàn)已成為助力中國商業(yè)征信環(huán)境、醫(yī)療健康領(lǐng)域高質(zhì)量發(fā)展的中堅力量。歷經(jīng)多年發(fā)展，倍通數(shù)據(jù)集團服務(wù)客戶已遍及全球500強跨國藥企，國內(nèi)大型內(nèi)資制藥企業(yè)，知名互聯(lián)網(wǎng)公司，知名信用保險及金融機構(gòu)。倍通秉承“共創(chuàng)健康產(chǎn)業(yè)數(shù)字智慧”的企業(yè)使命，以數(shù)據(jù)、數(shù)據(jù)技術(shù)及數(shù)據(jù)運營管理為基礎(chǔ)，專注為醫(yī)療健康領(lǐng)域客戶及行業(yè)創(chuàng)造價值。
公司主頁