爬虫

问题描述

如题,正在做一个网页爬虫,静态网页都可以获取,现在是一些动态网页,或伪静态页面获取不到源码,就是网页中的js或ajax执行后的页面源码,请问有什么办法?

解决方案

解决方案二：
对方怎么搞你怎么搞呗对方网页从ajax接口去请求数据，你把cookie扒拉下来，参数一模一样的生成好去请求，得到的数据再分析
解决方案三：
我要做的就是像这个网址http://www.wood365.cn/know/KnowDictList.html共52页，页的信息可以趴下来，现在要实现的就是动态获取网页的总页数，这个是js实现的，我不知道该怎么获得？我是新手，不怎么会，所以有经验的指点一下