问
python - 抓取天猫详情页里面的月销量，反爬非常厉害
穿行来回间 发布于 2022-10-25 09:45现在需要抓取天猫详情页里面的月销量
如https://detail.tmall.com/item...
已分析得到是异步js返回的数据，接口如下
https://mdskip.taobao.com/cor...
这个地址访问几次就需要登录，登录之后多访问几次就需要输入验证码
用代理换IP也一样
各位大神有啥好办法
4 个回答
-
有没有大神有过经验？
2022-10-26 23:00 回答
WSDRFCGFC_901 -
浏览器访问多少次都不会要求登录，用代码调浏览器插件访问htmlunit
用postman刷了50次也不会让我登录或者出现验证码，自己下个post试试，淘宝的反爬还是一般般。
https://www.endclothing.com用的反爬才真的见鬼2022-10-26 23:00 回答
赛亚兔备_393 -
获取入口可以选择移动端入口，例如：入口
数据直接就在页面上，获取数据就很容易了，关键字
"sellCount"。2022-10-26 23:01 回答
手机用户2502908275 -
不登陆，直接换代理
切换代理不要保持会话
2022-10-26 23:01 回答
热门星座排行榜空间
撰写答案
今天，你开发时遇到什么问题呢？
立即提问
京公网安备 11010802041100号