崗位職責:
1.任務管理?:組織團隊日常開發(fā)工作,制定項目計劃并跟蹤執(zhí)行進度,協(xié)調資源確保按時交付;
2.溝通協(xié)作?:與產品經理、設計師等角色緊密配合,明確需求細節(jié),推動技術方案與業(yè)務目標對齊;
3.代碼管理:制定技術規(guī)范、開發(fā)流程和最佳實踐,提升團隊開發(fā)效率和代碼質量;
4.?技術攻關?:解決開發(fā)中的復雜技術問題,應對反爬機制、高并發(fā)等場景,確保項目技術目標的達成;
5.方案設計?:根據(jù)產品/業(yè)務需求主導技術選型,設計系統(tǒng)架構與功能模塊實現(xiàn)方案,并將業(yè)務需求轉化為可落地的技術方案;
人才培養(yǎng)?:通過技術分享、指導提升團隊成員技能(如異步編程、性能調優(yōu)等);
任職資格:
1.??萍耙陨蠈W歷;
2.具備5年以上Python開發(fā)經驗,含2年以上Python技術團隊管理經驗(2~5人團隊);
3.精通Python開發(fā)及最佳實踐,包括:網絡反爬、加密破解、驗證碼識別、IP池搭建、Cookie池搭建等,熟練掌握多線程/協(xié)程編程;
4.具備大規(guī)模通用爬蟲項目經驗、大規(guī)模數(shù)據(jù)采集經驗、JS逆向開發(fā)項目或APP逆向經驗;
5.具備一定的自然語言處理理論和基礎,熟悉至少一種主流的NLP框架或庫;
6.并能靈活運用第三方模型進行數(shù)據(jù)標注和特征工程,熟悉目前市場上主流AI大模型,并能夠充分運用AI大模型進行數(shù)據(jù)提取且有相關的經驗案例;
7.熟練使用Scrapy、requests、xpath、selenium等;
8.對大數(shù)據(jù)平臺建設、管理、應用有一定了解,了解Hadoop/Hive/Spark/Flink/Hbase等大數(shù)據(jù)架構與技術,熟悉MySQL、Redis等數(shù)據(jù)庫設計及性能優(yōu)化;
9.具備較強的數(shù)據(jù)分析能力和洞察能力,對數(shù)據(jù)比較敏感,有良好的需求理解力和系統(tǒng)分析能力;
10.能獨立撰寫解決方案和技術文檔;具有優(yōu)秀的書面和口頭表達能力,良好的客戶服務意識,優(yōu)秀的團隊領導和組織協(xié)調能力;
掌握多門開發(fā)語言優(yōu)先,包含不限于Java、Javascript、C#、C、匯編語言等。