崗位要求:
1、負(fù)責(zé)設(shè)計(jì)爬蟲架構(gòu)以及優(yōu)化爬蟲策略,提升抓取的效率和質(zhì)量。
2、根據(jù)業(yè)務(wù)需求,爬取大型電商類平臺(tái)信息并進(jìn)行提取和分析,為業(yè)務(wù)部門提供數(shù)據(jù)支持。
3、負(fù)責(zé)現(xiàn)有爬蟲的完善和維護(hù)工作,提升爬蟲系統(tǒng)穩(wěn)定性。
4、對(duì)爬蟲系統(tǒng)及數(shù)據(jù)進(jìn)行定期的檢查,處理常見問題,保證爬取工作的高效開展。 |