抓取淘宝商品月销量,使用淘宝页面的[
detailskip.taobao.com],进行抓取。
1.有使用稳定的代理池,每隔一段时间更换。
2.如果对爬虫请求来说,如果我请求的每次 ip 地址都不一样,还会被 ban。那这个原因是什么?是需要带 cookie 去访问,还是淘宝使用了行为分析一类的策略?
3.帮忙一起分析下目前淘宝的反爬策略,谢谢!
https://detailskip.taobao.com/service/getData/1/p1/item/detail/sib.htm?itemId=583209412844&sellerId=3309239053&modules=dynStock,qrcode,viewer,price,duty,xmpPromotion,delivery,activity,fqg,zjys,couponActivity,soldQuantity,originalPrice,tradeContract&callback=onSibRequestSuccess
这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。
https://study.congcong.us/t/519722
V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。
V2EX is a community of developers, designers and creative people.