问题描述
- Python爬取美团外卖商家信息求助
-
我想爬美团外卖某个地点的商家信息,比如北京北太平庄,网址如下:http://waimai.meituan.com/home/wx4ergy6qht3,查看网址源代码是能够看到商家信息的,但是用Python爬虫只能得到美团外卖首页的内容。是我要给网站发送地理坐标信息吗?我看了一下网站是get方法,我应该怎么做呢,试了半天也弄不好,真心求助各位大神
解决方案
可能网站有cookie等信息 导致你的爬虫直接访问有问题 你python提交的数据要跟浏览器一样
解决方案二:
http://download.csdn.net/detail/wuyadong09281155/5854139
解决方案三:
给你一个大众点评的爬这类信息的源码,你可以参考:https://github.com/ShenJianShou/crawler_samples/blob/master/dianping.js
时间: 2024-11-15 21:27:50