读取网页数据

数据|网页

  public string GetWeb(string website)
  {
   try
   {
    string strHtmlContent="";
    string SourceUrl=website;
    System.Net.HttpWebRequest myrequest=(System.Net.HttpWebRequest)System.Net.WebRequest.Create(SourceUrl);
    myrequest.Timeout=5000;
    myrequest.Headers.Set("Pragma", "no-cache");
    System.Net.HttpWebResponse myresponse=(System.Net.HttpWebResponse)myrequest.GetResponse();
    System.IO.Stream mystream=myresponse.GetResponseStream();
    System.Text.Encoding myencoding=System.Text.Encoding.GetEncoding("Gb2312");
    System.IO.StreamReader mystreamreader=new System.IO.StreamReader(mystream,myencoding);
    strHtmlContent=mystreamreader.ReadToEnd();
    return strHtmlContent;   
   }
   catch
   {
    return "读取错误";
   }
  } 

时间: 2024-09-16 23:41:37

读取网页数据的相关文章

java读取网页数据超时

问题描述 public static void main(String[] args) throws IOException { getWebData("http://bbs.csdn.net/topics/380263902"); } private static String getWebData(String strurl) { try { URL url = new URL(strurl); // 打开连接,此处只是创建一个实例,并没有真正的连接 HttpURLConnecti

c# 如何读取网页上的数据 求大神指点

问题描述 请问大神们:如何读取网页上的数据求1.我想要读取网页上的信息,比如要获取百度贴吧一个帖子里所有的内容2.帖子有很多页,怎么继续按下一页继续读取呢?这里面需要什么方法或者控件,求大神给点思路和指导下!!!最好留个QQ请教 解决方案 解决方案二:求代码求思路求大大解决方案三:通过当前页获取,获取后面页面,解决方案四:http://blog.csdn.net/X___V/article/details/8605946怎么获取内容,网上很多.主要获取到要怎么分析有用的解决方案五:引用3楼u01

通过实例学习ASP读取XML数据文件的方法

xml|数据 通过实例学习ASP读取XML数据文件的方法,希望大家能很快掌握,提供两段代码. 分别保存下面两段代码,一个保存为readxml.asp另一个保存为test.xml,放在同一个目录下面,调试程序即可,在程序里面我已经做了解释,读取代码可以做成一个readxml的函数,通过使用输入的参数而读取xml不同数据记录的不同的值.这段程序的改编来自互联网,有什么出入请见谅. readxml.asp <%dim xml,objNode,objAtr,nCntChd,nCntAtrSet xml=

java-如何获取网页数据。比如

问题描述 如何获取网页数据.比如 比如一天笑话点开评论后 会有一个评论的列表显示出来. 如何获取评论的数据. 这里本来有个号..我用{表示下同{div> div class="operation-btn"> a href="javascript:void(0)" rel="nofollow" class="comment commentClick" title="评论" obj_info=&qu

php-怎么判断网页数据接收结束?

问题描述 怎么判断网页数据接收结束? 我要通过post向一个接口获取数据,查询过程我添加了一个遮罩提示正在查询,数据获取结束之后关闭遮罩层再弹出一个显示结果的层,我该怎么判断程序已经读取玩数据了呢? 解决方案 返回一个标识符行吗,让接口返回一个可以判断的标识符,通过这个标识符来判断.或者通过response的状态码,如果为200表示已经返回了.试试,看看行吗 解决方案二: 如果是银行那种接口,都会默认返回一个post值,然后通过判断接口的返回内容.

python-Python 读取MYSQL数据并插入到CSV文件相应位置

问题描述 Python 读取MYSQL数据并插入到CSV文件相应位置 数据库有一张表,除时间以外,每个字段都有可能重复(因为是按照系统时间,自动获取的网页数据现在我想做一张csv表,表的列名是时间字段(跟据数据库时间自增的),每行开头是名称(数据库存在的,只不过是去重后取出的)那么现在问题来了,如何按照时间名称从数据库获取数据填入相应的位置. 解决方案 你直接用对应的sql语句查询出符合你要求的数据,然后再写入CSV文件. 解决方案二: MySQL 直接读取csv文件数据到表中python读取c

php通过odbc读取informix数据出现乱码,应该怎么修改?

问题描述 php通过odbc读取informix数据出现乱码,应该怎么修改? 是修改client locale和database locale还是修改其他?修改成什么? 我是用php调用的,可以通过php语言转换所调用数据编码吗? 网页显示结果如下: 今天日期:12-12-04 险种 单数 保费 ???? 994 1974911.90 ?????? 20 68230.00 ?????? 10 3750.00 ?????? 52 8026.43 ????? 24 15090.00 ??? 1100

网页数据-想获取网页的一些数据,我应该怎么做呢?或者说我应该去学什么?

问题描述 想获取网页的一些数据,我应该怎么做呢?或者说我应该去学什么? 目标:在某网页上输入用户名密码验证码,再点一些按钮,就可以看到数据.我想做个自动化脚本,可以自动获取到这些数据保存下来. 条件:该网页由Tomcat搭建,我可以操作到这台机器:我会一些VBScript,自动保存没问题,只是不知道怎么获取数据:我会一点PHP,知道一点网页传递数据的原理: 解决方案 一点就是还不会,多学习实践一下 解决方案二: 发送http请求,然后接收返回的网页数据,再分析这些数据,以后保存.这东西叫爬虫.我

sql-ASP读取SQL数据表 生成多记录JSON 具体代码如何写 求教大神

问题描述 ASP读取SQL数据表 生成多记录JSON 具体代码如何写 求教大神 数据表是user 主键是m_Name <%response.ContentType=""text/json"" response.write request(""jsoncallback"")%>([{""m_Name"":""*依旧""n_Name&quo