爬取网页时提示只允许在微信中打开

技术百科 码拜 9年前 (2016-07-28) 3894次浏览 0个评论

爬取网页时提示只允许在微信中打开,这种网页一般来说都是判断user-agent有没有“MicroMessenger”,在user-agent的中模拟加入MicroMessenger基本就可以了。
比如:

爬取网页时提示只允许在微信中打开

设置浏览器代理user-agent为Mozilla/5.0 (Linux; U; Android 2.3.6; zh-cn; GT-S5660 Build/GINGERBREAD) AppleWebKit/533.1 (KHTML, like Gecko) Version/4.0 Mobile Safari/533.1 MicroMessenger/4.5.255

或者Mozilla/5.0 (iPhone; CPU iPhone OS 5_1 like Mac OS X) AppleWebKit/534.46 (KHTML, like Gecko) Mobile/9B176 MicroMessenger/4.3.2

这种处理方式只能针对部分情况,如果是使用的OAuth授权,则无法绕过。


CodeBye 版权所有丨如未注明 , 均为原创丨本网站采用BY-NC-SA协议进行授权 , 转载请注明爬取网页时提示只允许在微信中打开
喜欢 (0)
[1034331897@qq.com]
分享 (0)

文章评论已关闭!