職位描述
后端開發(fā)大數(shù)據(jù)開發(fā)SpringBootSpringCloud
工作描述:
1．負責各類主流電商平臺、短視頻平臺的數(shù)據(jù)抓取平臺建設(shè)(偏工程方向)和維護；
2．負責爬蟲自研基礎(chǔ)工具和框架開發(fā)和維護，配合逆向開發(fā)同學解決爬蟲遇到的各種反爬問題；
3. 負責爬蟲數(shù)據(jù)的清洗，存儲等大數(shù)據(jù)開發(fā)工作。
4．與項目經(jīng)理、產(chǎn)品、下游團隊等部門人員溝通，對外提供各種服務(wù)完成整體業(yè)務(wù)需求達成業(yè)務(wù)目標；
職位要求:
1. 計算機相關(guān)專業(yè)本科以上學歷，3年以上Java編程經(jīng)驗；
2. 熟練掌握Java開發(fā)技術(shù)，基礎(chǔ)扎實，熟悉Java技術(shù)體系(JVM、類裝載機制、多線程并發(fā)、IO、網(wǎng)絡(luò)等)
3. 了解常用開源爬蟲技術(shù)框架，了解前端js技術(shù)。
4. 有大數(shù)據(jù)相關(guān)開發(fā)經(jīng)驗，有良好的數(shù)據(jù)建模能力，能熟練使用hive，sparksql。有odps等使用經(jīng)驗更佳。
5. 熟悉分布式和高并發(fā)系統(tǒng)的設(shè)計與開發(fā)，熟悉Mysql 、Memcache、Redis、消息隊列、ES等常用組件的使用與調(diào)優(yōu)；
6. 熟悉 Linux 環(huán)境下常用的系統(tǒng)工具，能利用工具排查 CPU、內(nèi)存和網(wǎng)絡(luò) IO 等問題；
7. 積極樂觀，責任心強，工作認真細致，具有良好的團隊溝通與協(xié)作能力，抗壓能力強，有較強的自我驅(qū)動能力。
工作地點
廣州天河區(qū)珠江城
入職公司信息
- 入職公司: 廣州市海珠區(qū)琶洲數(shù)字經(jīng)濟創(chuàng)新發(fā)展服務(wù)中心
- 公司地址:
- 公司人數(shù): 500-999人
相似職位
- 后端開發(fā)工程師1-1.6萬
廣州 - 黃埔
廣州理工學院 - Java（電商+小程序）1-1.2萬
廣州 - 白云
上海杰艾企業(yè)管理咨詢有限公司 - Java開發(fā)工程師6000-8000元
廣州 - 越秀
廣州市申迪計算機系統(tǒng)有限公司 - 后端開發(fā)2.5-3萬
廣州 - 南沙
廣州南沙資訊科技園有限公司博士后科研工作站 - 中高級開發(fā)工程師（WMS系統(tǒng)） G014941.8-2.6萬
廣州 - 天河
廣州市森大貿(mào)易有限公司 - java助理9000-10000元
廣州 - 黃埔
重慶與問職趣網(wǎng)絡(luò)科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲招聘
- 天江藥業(yè)招聘
- 藍月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團招聘
- 中國移動招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
樊先生/招聘經(jīng)理
立即溝通
智聯(lián)獵頭智聯(lián)獵頭作為智聯(lián)招聘旗下品牌，以滿足企業(yè)中高端崗位的人才招聘需求為出發(fā)點，整合全球優(yōu)質(zhì)資源，覆蓋數(shù)字經(jīng)濟、新一代信息技術(shù)、人工智能、金融、電子信息、裝備制造、生物醫(yī)藥與健康、房地產(chǎn)/建筑等數(shù)十個行業(yè)，擁有規(guī)模龐大、覆蓋面廣的交付團隊，致力于向企業(yè)輸出專業(yè)化的招聘解決方案。智聯(lián)獵頭目前擁有卓聘平臺服務(wù)、招聘流程外包服務(wù)、高端人才獵尋服務(wù)三大類核心服務(wù)，具備高度定制化能力，能夠為不同發(fā)展階段的企業(yè)提供一站式招聘解決方案，同時為企業(yè)轉(zhuǎn)型升級提供保障，全面增強企業(yè)核心競爭力！智聯(lián)獵頭利用自身獨特的資源優(yōu)勢、成熟的服務(wù)模式，以及多層次的產(chǎn)品，致力于打造高效、專業(yè)的一站式人才服務(wù)模式，讓招聘更加美好！
公司主頁