爬取网页时提示只允许在微信中打开,这种网页一般来说都是判断user-agent有没有“MicroMessenger”,在user-agent的中模拟加入MicroMessenger基本就可以了。
比如:
设置浏览器代理user-agent为Mozilla/5.0 (Linux; U; Android 2.3.6; zh-cn; GT-S5660 Build/GINGERBREAD) AppleWebKit/533.1 (KHTML, like Gecko) Version/4.0 Mobile Safari/533.1 MicroMessenger/4.5.255
或者Mozilla/5.0 (iPhone; CPU iPhone OS 5_1 like Mac OS X) AppleWebKit/534.46 (KHTML, like Gecko) Mobile/9B176 MicroMessenger/4.3.2
这种处理方式只能针对部分情况,如果是使用的OAuth授权,则无法绕过。