職位描述
ScrapyMySQLMongoDBPython數(shù)字建模爬蟲
崗位職責(zé)：
一、電商平臺(tái)數(shù)據(jù)爬取
1、負(fù)責(zé)設(shè)計(jì)分布式爬蟲系統(tǒng)，采集抖、快、拼等電商平臺(tái)的商品信息（訂單信息、店鋪信息、評(píng)論等）；
2、應(yīng)對(duì)反爬機(jī)制（IP封鎖、驗(yàn)證碼、動(dòng)態(tài)加載），使用代理IP、Selenium模擬瀏覽器等技術(shù)突破限制；
3、優(yōu)化爬蟲性能，包括并行化爬取、數(shù)據(jù)去重、異步IO等技術(shù)提升效率；
4、數(shù)據(jù)清洗與存儲(chǔ)：通過正則表達(dá)式/XPath解析數(shù)據(jù)，存儲(chǔ)至MySQL/MongoDB等數(shù)據(jù)庫。
二、 智能體搭建與系統(tǒng)開發(fā)
1、開發(fā)AI智能體開發(fā)，新媒體推廣智能體與辦公智能體的開發(fā)實(shí)施；
2、參與自動(dòng)化系統(tǒng)（如訂貨單生成、報(bào)表統(tǒng)計(jì)），結(jié)合爬蟲與業(yè)務(wù)需求提升效率
維護(hù)爬蟲服務(wù)器，監(jiān)控任務(wù)調(diào)度與報(bào)警反饋，確保系統(tǒng)穩(wěn)定性；
三、數(shù)字人建模開發(fā)（優(yōu)先項(xiàng)）
1、熟悉自然語言處理（NLP）或機(jī)器學(xué)習(xí)算法，支持智能客服、問答機(jī)器人等應(yīng)用；
2、具備數(shù)據(jù)挖掘經(jīng)驗(yàn)，能構(gòu)建用戶行為分析或個(gè)性化推薦系統(tǒng)/3
有數(shù)字人從0-1搭建開發(fā)并上線經(jīng)驗(yàn)優(yōu)先；
任職要求 ：
一、技術(shù)能力
1、精通Python開發(fā)，熟悉Scrapy、Requests、Selenium等爬蟲框架；
2、掌握HTML/CSS/JS解析技術(shù)（XPath、正則表達(dá)式、Beautiful Soup）；
3、熟悉數(shù)據(jù)庫優(yōu)化（MySQL、MongoDB）及分布式存儲(chǔ)原理；
4、了解HTTP協(xié)議、抓包工具（Fiddler、Charles）及逆向工程（APP反編譯、JS解密）。
二、經(jīng)驗(yàn)要求
1、5年以上Python開發(fā)經(jīng)驗(yàn)，3年以上電商數(shù)據(jù)爬取實(shí)戰(zhàn)經(jīng)驗(yàn)；
2、有AI智能體開發(fā)經(jīng)驗(yàn)；
3、具備數(shù)字人建模、機(jī)器學(xué)習(xí)或大數(shù)據(jù)處理（Hadoop/Spark）經(jīng)驗(yàn)者優(yōu)先
三、軟性要求
1、計(jì)算機(jī)相關(guān)專業(yè)本科及以上學(xué)歷；
2、良好的編碼規(guī)范，能獨(dú)立解決問題并優(yōu)化系統(tǒng)性能；
3、適應(yīng)高強(qiáng)度工作，具備團(tuán)隊(duì)協(xié)作與跨部門溝通能力
工作地點(diǎn)
廣州越秀區(qū)中華國(guó)際中心
相似職位
- AI工程師（Python后端方向）1.5-2.5萬
廣州 - 天河
廣東廣新家具有限公司 - Python開發(fā)工程師1.8-2.3萬
廣州 - 天河
中電金信軟件有限公司 廣州 - 番禺
深圳市法本信息技術(shù)股份有限公司- 軟件工程實(shí)習(xí)生（偏Python）3000-4000元
廣州 - 黃埔
廣州玻思韜控釋藥業(yè)有限公司 - python后端開發(fā)工程師1.2-1.5萬
廣州 - 天河
中科軟科技股份有限公司 - Python開發(fā)工程師8000-14000元
廣州 - 番禺
廣州市點(diǎn)易資訊科技有限公司
熱門公司推薦
- 霸王茶姬招聘
- 肯德基招聘
- 順豐招聘
- 美團(tuán)招聘
- 京東招聘
- 餓了么招聘
- 比亞迪招聘
- 中國(guó)一汽招聘
- 北京汽車招聘
- 蔚來招聘
- 東風(fēng)汽車招聘
- 長(zhǎng)城汽車招聘
- 奇瑞汽車招聘
- 理想汽車招聘
- 長(zhǎng)鑫存儲(chǔ)招聘
- 天江藥業(yè)招聘
- 藍(lán)月亮招聘
- 安踏招聘
- TCL招聘
- 海信招聘
- 聯(lián)想招聘
- ?？低曊衅?/a>
- 寧德時(shí)代招聘
- 中興招聘
- 新松招聘
- 京東方招聘
- 申通招聘
- 圓通招聘
- 中通招聘
- 百世物流招聘
- 德邦物流招聘
- 麥當(dāng)勞招聘
- 星巴克招聘
- 海底撈招聘
- 蜜雪冰城招聘
- 瑞幸招聘
- 雀巢招聘
- 騰訊招聘
- 百度招聘
- 快手招聘
- 字節(jié)跳動(dòng)招聘
- 新華網(wǎng)招聘
- 小米招聘
- 招商銀行招聘
- 中信銀行招聘
- 北京銀行招聘
- 興業(yè)銀行招聘
- 交通銀行招聘
- 建發(fā)集團(tuán)招聘
- 中國(guó)移動(dòng)招聘
- 中國(guó)聯(lián)通招聘
- 中國(guó)電信招聘
- 中糧集團(tuán)招聘
- 國(guó)藥控股招聘
- 中廣核招聘
- 中國(guó)船舶招聘
- 強(qiáng)生中國(guó)招聘
- 匯豐中國(guó)招聘
- 宜家招聘
- 立邦中國(guó)招聘
- 伊利招聘
- 青島啤酒招聘
- 京港地鐵招聘
- 寶馬招聘
- 小鵬汽車招聘
- 華為招聘
- 特斯拉招聘
- 吉利招聘
- 奔馳招聘
- 海爾招聘
- 美的招聘
- 京東方招聘
- 施耐德電氣招聘
- 德邦物流招聘
職位發(fā)布者
李女士/人事經(jīng)理
昨日活躍立即溝通
廣州匯旭信息科技有限公司
廣州匯旭科技有限公司是一家基于大數(shù)據(jù)、AI智能的Saas線上撮合平臺(tái)，通過運(yùn)用AI、大數(shù)據(jù)和區(qū)塊鏈等數(shù)字科技高效迅捷革除小微與銀行間的信息差。目前總部位于廣東廣州，分公司位于北京，后期將在武漢開設(shè)分公司。公司處于成立初期，行業(yè)前景較好。
公司主頁