热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

在控制台Network面板可以看到的返回数据,用爬虫爬出来后那个字段就没有了,可以破解吗?

试着爬微博的数据,有一个 since_id 字段是爬下一页要用的,在控制台能看到,但是用代码发起请求获取回来的数据就没有这个字段了,其他字段都有,就这个字段没有,所以只能爬一页的数据...这是新浪的防

试着爬微博的数据,有一个 since_id 字段是爬下一页要用的,在控制台能看到,但是用代码发起请求获取回来的数据就没有这个字段了,其他字段都有,就这个字段没有,所以只能爬一页的数据...这是新浪的防爬手段吗,破解方法难吗?





   



推荐阅读
author-avatar
echo7111436
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有