搜狗微信的反爬虫规则是怎么样的?我每 2 分钟抓取一次可以吗
答案:2 悬赏:10 手机版
解决时间 2021-04-10 11:47
- 提问者网友:轻浮
- 2021-04-10 00:04
搜狗微信的反爬虫规则是怎么样的?我每 2 分钟抓取一次可以吗
最佳答案
- 五星知识达人网友:动情书生
- 2021-04-10 00:26
只要访问跳转链接的时候在cookie中带上SNUID值即可,其他的都可以不要
后来搜狗又做了IP限制,这种反反爬虫的策略也要与时俱进,针对新限制做调整
如果对速度要求不高,可以尽量加大两次访问的时间间隔,而如果对速度要求比较高
那就可以去买一些IP来用,针对验证码问题,则可以自己写验证码识别程序或者程序
中加载打码软件
后来搜狗又做了IP限制,这种反反爬虫的策略也要与时俱进,针对新限制做调整
如果对速度要求不高,可以尽量加大两次访问的时间间隔,而如果对速度要求比较高
那就可以去买一些IP来用,针对验证码问题,则可以自己写验证码识别程序或者程序
中加载打码软件
全部回答
- 1楼网友:你哪知我潦倒为你
- 2021-04-10 01:22
用前嗅的forespider数据采集软件就可以采集微信朋友圈的数据了。是可视化的通用性爬虫软件。简单配置两步就可以采集,软件还自带免费的数据库,可以采集直接入库。
在forespider里有一个内置浏览器,在里边打开这个网站,和在浏览器上一样输入用户名密码,登录上去后就可以了。可以设置自动登录,下次爬虫还会自动登录。
可以下载个免费版的试试,软件里有一些免费的模板,里边有一个登录的,还有公众号的案例。帮助文档里也有登录的配置步骤。
如果自己不想配置,可以让前嗅提供配置服务。可以下载一个免费版试一试,免费版不限制功能。
我要举报
如以上问答信息为低俗、色情、不良、暴力、侵权、涉及违法等信息,可以点下面链接进行举报!
大家都在看
推荐资讯