问题描述
- 用python爬虫登陆网页时网页的重定向问题
-
用python爬虫登陆一个网站 用urlopen打开后 打印获得的内容发现返回的一直是登陆界面
检查了cookie,表单内容的编码都是正确的 在网页上登陆后抓包发现返回的是一个302重定向
这个重定向是导致返回内容一直是登陆界面的原因吗?如果是的话应该怎么处理?
解决方案
注意cookie的问题,参考:http://lilydjwg.is-programmer.com/posts/22121.html
http://iyuan.iteye.com/blog/1749811
解决方案二:
获取重定向地址,然后接着urlopen
解决方案三:
用手机浏览器的user-agent去试试。说不定是可以的。
时间: 2024-09-12 15:16:47