求助！求高手帮忙抓取一个网页内容

问题描述

我想抓去这个网页上的开奖数据http://www.caipiaokong.com/lottery/bjks.html可只要我一抓取就发现抓到的数据变成了下面的这样了："<scripttype=""text/javascript"">alert('请先登录或注册');location.href='http://www.caipiaokong.com/member.php?mod=logging&action=login';</script>"于是我尝试登陆，结果这网站的登陆用户名密码文本框id名字竟然还是随机生成的，感觉不成了，哪位大侠能帮帮我！PublicFunction获取网页数据(ByValurlAsString,OptionalByValEncodeNameAsString="GB18030",OptionalByValRefererAsString="",OptionalByValKeepAliveAsBoolean=False,OptionalByValUserAgentAsString="")AsStringTryDimhttpReqAsSystem.Net.HttpWebRequestDimhttpRespAsSystem.Net.HttpWebResponseDimhttpURLAsNewSystem.Uri(url)httpReq=CType(Net.WebRequest.Create(httpURL),Net.HttpWebRequest)httpReq.Method="GET"httpReq.Referer=Referer'"http://www.nmlottery.com.cn/k3/index.shtml"httpReq.UserAgent=UserAgent'"Mozilla/5.0(WindowsNT6.3;WOW64;Trident/7.0;rv:11.0)likeGecko"httpResp=CType(httpReq.GetResponse(),Net.HttpWebResponse)httpReq.KeepAlive=KeepAliveDimreaderAsIO.StreamReader=NewIO.StreamReader(httpResp.GetResponseStream,System.Text.Encoding.GetEncoding(EncodeName))DimrespHTMLAsString=reader.ReadToEnd()'respHTML就是网页内容ReturnrespHTMLCatchexAsExceptionReturnString.EmptyEndTryEndFunction

以上是我写的抓取网页内容的代码，调用代码如下：获取网页数据("http://www.caipiaokong.com/lottery/bjks.html","utf-8")

解决方案

解决方案二：
联系我894526138
解决方案三：

解决方案四：

解决方案五：
zj_zwl：已经加了
解决方案六：
有哪位大侠能解决的

时间： 2024-08-27 23:26:50

求助！求高手帮忙抓取一个网页内容的相关文章

post-【还未解决，再求助】求php远程抓取的代码！

问题描述 [还未解决,再求助]求php远程抓取的代码! 下面的回答,一般旺旺号可以了,但当查询的开店的旺旺或商城旺旺,就查不到了,好像是接口是另一个,可以帮找一下吗?谢谢了: 网址是 http://www.taodake.com 获取远程post查询后,抓取查询的数据.这个用PHP怎么才能抓取呀,求教代码,帮帮忙600C币酬谢了: 解决方案 那2个接口都可以直接访问,修改nick参数就行,php不懂了..js下面的直接搞定 <b>HTML</b> <div id="

方法-请教一个模拟登陆的问题！！求高手帮忙！！

问题描述 请教一个模拟登陆的问题!!求高手帮忙!! 模拟登陆需求具体流程是这样的: 1.访问登陆页面. 2.返回页面里 某个 input的值(用于每次登陆传参用,此值为动态的,每次打开页面都会变化). 3.模拟post登陆提交. 4.接收返回页面. ---------------- 实现过程与问题: 1.正常模拟访问页面. 2.正常返回页面,(抓取所需动态值). 3.模拟提交(问题出现在这,因为1已经访问过了页面,而3步的模拟提交还要访问一次,所有造成了所需的 input动态值发生变化了.) 问

ios-小女子求高手帮忙绘制一个自定义图表

问题描述 小女子求高手帮忙绘制一个自定义图表 小女子刚开始ios编程不久,如今有个画图表的需求,不知道该怎么实现,求高手帮帮忙,下面是需求图C804A51F-3878-4D66-9C49-EF996F790E23.png 解决方案 图都看不见. 刚开始,谁都一样,多练习多查资料,慢慢就会了,一步步来. 先自己想,先把思路列出来,不会的再查,主要是要想弄明白需求是什么,弄不明白,其他的就是会了,在遇到问题,你也想不明白. 这是我的观点,我也是刚学习IOS编程不久,经常蒙圈.多练多敲多想多查就好了.

技术-求高手帮忙更新,Greatnews是一个最简洁最好用的RSS订阅器,开发者很久没有更新了;

问题描述 求高手帮忙更新,Greatnews是一个最简洁最好用的RSS订阅器,开发者很久没有更新了; http://www.curiostudio.com/ Greatnews这是本人遇到的最简洁,最好用的桌面RSS Reader了,但开发者10年更新后就停止更新了; 现在的网页开发技术和浏览器的更新,这个RSS工具在打一开网页时就是会提示浏览器需要更新,如:flickr.com这类新WEB技术的网页打开就显示不对,提示要更新:还有这个Reaer的代理设置处可能有一个BUG,设置了它的代理没有用

接口-【400C币】求php远程抓取的代码！

问题描述 [400C币]求php远程抓取的代码! 网址是 http://www.taodake.com 获取远程post查询后,抓取查询的数据.求教代码,帮帮忙400C币酬谢了: 已经有人找到接口了,只能是普通的旺旺号,换成商城旺旺或C店旺旺就查询不到了,估计是另一个接口,请求大家帮找一下另一个接口: http://wwwsoso002.taodake.com/taobao_data.php?callback=jQuery17105857618552680781_1422435501967&ni

求高手帮忙数据查询优化

问题描述 在一个页面进行查询,可是好久之后才会显示查询到数据,代码如下:求高手帮忙if(this.lukGroup.EditValue==null){MessageBox.Show("工作中心组必选!");return;}stringsql="";//stringif(this.lukLine.EditValue!=null&&this.lukLine.EditValue.Equals("09")){sql="SELEC

log4j输出日志了两遍，求高手帮忙看看

问题描述 log4j输出日志了两遍,求高手帮忙看看 我的项目是用log4j.xml配置的,配置了一个root,然后又配置了一个logger,nane=test,root和logger输出到不同的日志文件中,使用Logger.getLogger("test").info("test").结果两个日志文件都输出了日志,我的期望是只在test那个logger里输出,怎么做才能实现呢?

opengl-请教一个关于GLSL的问题，求高手帮忙，感激不尽！

问题描述 请教一个关于GLSL的问题,求高手帮忙,感激不尽! 我现在需要用GLSL实现对三角面的渲染,法向量的数量只有顶点数量的三分之一,那么在GLSL中怎么才能三个顶点(也就是一个面)共用一个法向量啊?

app-跪求高手帮忙看下程序为什么android连接不到servlet上,谢谢大家了

问题描述 跪求高手帮忙看下程序为什么android连接不到servlet上,谢谢大家了 android客户端 package com.android.helloworld; import java.io.DataOutputStream; import java.io.IOException; import java.io.OutputStream; import java.net.HttpURLConnection; import java.net.MalformedURLException;