職位描述
數(shù)據(jù)采集爬蟲開發(fā)反爬蟲數(shù)據(jù)挖掘Python云計(jì)算/大數(shù)據(jù)互聯(lián)網(wǎng)IT服務(wù)計(jì)算機(jī)軟件
崗位職責(zé)
1.負(fù)責(zé)制定和實(shí)施工程信息數(shù)據(jù)采集策略，開發(fā)并維護(hù)爬蟲程序，從各類合法數(shù)據(jù)源高效抓取工程建設(shè)、招投標(biāo)等相關(guān)數(shù)據(jù)。
2.深入分析目標(biāo)網(wǎng)站的結(jié)構(gòu)和反爬機(jī)制，不斷優(yōu)化爬蟲算法，提高數(shù)據(jù)抓取的準(zhǔn)確性、穩(wěn)定性和效率，確保數(shù)據(jù)的及時(shí)更新。
3.協(xié)助進(jìn)行數(shù)據(jù)清洗和預(yù)處理工作，保證采集到的數(shù)據(jù)質(zhì)量，為后續(xù)的數(shù)據(jù)分析和服務(wù)提供堅(jiān)實(shí)基礎(chǔ)。
4.與團(tuán)隊(duì)成員緊密協(xié)作，根據(jù)業(yè)務(wù)需求不斷擴(kuò)展和優(yōu)化數(shù)據(jù)采集的范圍和深度，支持平臺(tái)功能的升級(jí)和拓展。
任職要求
1.熟練掌握至少一種編程語言，如Python、Java等，具備扎實(shí)的編程基礎(chǔ)和良好的代碼規(guī)范。
2.精通網(wǎng)絡(luò)爬蟲技術(shù)，熟悉Scrapy、BeautifulSoup、Selenium等相關(guān)框架和工具。
3.了解常見的反爬蟲策略，能夠有效應(yīng)對(duì)和處理各類反爬問題，如IP封禁、驗(yàn)證碼識(shí)別等。
4.有工程信息、招投標(biāo)數(shù)據(jù)采集或相關(guān)領(lǐng)域爬蟲開發(fā)經(jīng)驗(yàn)者優(yōu)先，能夠清楚了解數(shù)據(jù)來源和數(shù)據(jù)特征者更佳。
5.具備較強(qiáng)的問題解決能力和邏輯思維能力，能夠獨(dú)立分析和解決遇到的技術(shù)難題。
6.有良好的團(tuán)隊(duì)合作精神和溝通能力，能夠承受一定的工作壓力，適應(yīng)項(xiàng)目節(jié)奏。
7.有工程信息聚合與招投標(biāo)服務(wù)平臺(tái)工作經(jīng)驗(yàn)優(yōu)先。
8.有顛覆性行業(yè)認(rèn)知。
薪資待遇：專職50萬；兼職30萬。
工作地點(diǎn)
福州晉安區(qū)福建五維智訊電氣有限公司
相似職位
- 爬蟲數(shù)據(jù)采集工程師8000-10000元
福州 - 鼓樓
福建學(xué)工坊信息科技有限公司 - 爬蟲工程師1.1-2萬·13薪
福州 - 閩侯
博思軟件 - 高級(jí)爬蟲工程師3-5萬
福州 - 晉安
福建五維發(fā)展集團(tuán)有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- 海康威視招聘
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國移動(dòng)招聘
- 中國聯(lián)通招聘
- 中國電信招聘
- 中糧集團(tuán)招聘
- 國藥控股招聘
- 中廣核招聘
- 中國船舶招聘
- 強(qiáng)生中國招聘
- 匯豐中國招聘
- 宜家招聘
- 立邦中國招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
易女士/人事專員
今日活躍立即溝通
福建五維發(fā)展集團(tuán)有限公司福建五維發(fā)展集團(tuán)，是一家以環(huán)境保護(hù)為核心領(lǐng)域發(fā)展的股份制企業(yè)。擁有集投資、研發(fā)、咨詢、設(shè)計(jì)、建設(shè)、運(yùn)營、設(shè)備制造于一體的全產(chǎn)業(yè)鏈服務(wù)模式，為水務(wù)與固廢處理、智慧城市、自動(dòng)化與能效節(jié)能等領(lǐng)域提供創(chuàng)新產(chǎn)品與整體解決方案。五維發(fā)展集團(tuán)圍繞水務(wù)與固廢處理、智慧城市、自動(dòng)化與能效節(jié)能三大主業(yè)，重點(diǎn)依托工程建設(shè)服務(wù)、投資運(yùn)營管理、研發(fā)設(shè)計(jì)服務(wù)三大支撐，通過產(chǎn)業(yè)延伸與整合，循序漸進(jìn)地實(shí)現(xiàn)三大主業(yè)、三大支撐的建設(shè)。五維發(fā)展集團(tuán)完善的創(chuàng)新技術(shù)和解決方案廣泛應(yīng)用于環(huán)境保護(hù)、水務(wù)處理、固廢處理、物聯(lián)網(wǎng)、大數(shù)據(jù)、能源、建筑、交通、醫(yī)療、酒店、場館、家居等領(lǐng)域，幫助城市提升能效、安全、生產(chǎn)力和舒適性，有效降低資源消耗和減少環(huán)境污染。從而打造更安全、更舒適、更節(jié)能、更健康的環(huán)境。
公司主頁