Java研發工程師(J13242)
- 招聘類別:技術/研發
- 需求部門:字庫業務板塊
- 工作性質:全職
- 薪資范圍:15001-25000 元/月
- 招聘人數:2
- 截止時間:
工作職責:
1.參與爬蟲系統的架構設計、核心模塊(抓取調度,頁面解析和結構化抽取,海量數據存儲和讀取等)開發,改進和提升爬蟲效率;
2.攻破各種反爬策略,快速解決各類技術疑難問題,建設反爬對抗組件庫;
3.完善爬蟲的技術指標體系,并基于指標迭代優化爬蟲基礎能力,指標體系中,全面性指標的建立,基于隨機采樣,估計系統總體目標信息;
4.技術難題攻關,解決實際開發過程碰到的各類問題;
任職資格:
1.計算機或相關專業,本科或以上學歷,3年以上爬蟲開發經驗;
2.精通至少一種開發語言,如Python、Java,熟練掌握至少一種開源爬蟲框架,熟練掌握mongo、redis、mq、hadoop等相關技術;
3.對爬蟲有濃厚的興趣,責任感強,有較好的交流溝通能力和團隊合作能力;
4.優先條件:參與過分布式爬蟲系統設計和開發;有自己的爬蟲作品;參與過開源爬蟲項目并貢獻代碼;深入研究過開源爬蟲項目源碼。