微信网页版网页抓取信息,GET请求,基础链接关闭

问题描述

stringurl="https://login.weixin.qq.com/jslogin?appid=wx782c26e4c19acffb&redirect_uri=https%3A%2F%2Fwx.qq.com%2Fcgi-bin%2Fmmwebwx-bin%2Fwebwxnewloginpage&fun=new&lang=zh_CN&_=1365142128439";//stringstrCookie=GetCookieString(url);ServicePointManager.Expect100Continue=true;ServicePointManager.SecurityProtocol=SecurityProtocolType.Ssl3;ServicePointManager.ServerCertificateValidationCallback=newRemoteCertificateValidationCallback(CheckValidationResult);HttpWebRequestmyReq=(HttpWebRequest)WebRequest.Create(url);myReq.ProtocolVersion=HttpVersion.Version10;myReq.UserAgent="Mozilla/5.0(WindowsNT6.1)AppleWebKit/537.36(KHTML,likeGecko)Chrome/38.0.2125.122Safari/537.36";myReq.Accept="text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8";myReq.Host="login.weixin.qq.com";HttpWebResponsemyRes=(HttpWebResponse)myReq.GetResponse();StreamresStream=myRes.GetResponseStream();StreamReaderstrReader=newStreamReader(resStream);stringresStr=strReader.ReadToEnd();Response.Write(resStr);privatestaticboolCheckValidationResult(objectsender,X509Certificatecertificate,X509Chainchain,SslPolicyErrorserrors){returntrue;//总是接受}

搞了两天,网上的方法也试了,,基础链接已关闭的异常,急急急,解决了可以加分!

解决方案

解决方案二:

解决方案三:
返回的不是200吗啥基础链接关闭??

时间: 2024-07-30 12:36:50

微信网页版网页抓取信息,GET请求,基础链接关闭的相关文章

php通过curl单独抓取网页可以,抓取多个就会出错

问题描述 php通过curl单独抓取网页可以,抓取多个就会出错 使用curl单独抓取http://jobs.hubu.edu.cn/Detail.aspx?ArticleChannelId=81&ArticleId=5722可行,但是如果抓取相同类型的一系列网站就会出错,将他们放在数组 $linkList中,分别是http://jobs.hubu.edu.cn/Detail.aspx?ArticleChannelId=81&ArticleId=5722,http://jobs.hubu.e

c# 正则表达式对网页进行内容抓取

原文 c# 正则表达式对网页进行内容抓取 搜索引擎中一个比较重要的环节就是从网页中抽取出有效内容.简单来说,就是吧HTML文本中的HTML标记去掉,留下我们用IE等浏览器打开HTML文档看到的部分(我们这里不考虑图片). 将HTML文本中的标记分为:注释,script ,style,以及其他标记分别去掉: 1.去注释,正则为: output = Regex.Replace(input, @"<!--[^-]*-->", string.Empty, RegexOptions.

提高网页被搜索引擎抓取、索引和排名的方法

首先通过下图看看通常网站的架构图:   典型的网站外链分布图 然后我们看看一个典型网站外链分布图:   爬虫抓取路径的优先级 下面要讲到一个被很多SEO们误解的重要概念.很久以前,搜索引擎的爬虫(机器人)大部分时间都会递归地抓取某个网站(通过你提交的网站首页网址,然后通过网页上发现的链接抓取这些链接所指向的网页,周而复始).但现在不是那么回事了,就像下面的图一样,搜索引擎的爬虫抓取时会有多个进入点,并且每个进入点都同样重要,然后再从这些进入点向外扩散,进行抓取.     搜索引擎爬虫抓取路径的优

如何让百度蜘蛛来抓取信息

深切体会,知道如何让百度蜘蛛来抓取信息!小女子原创(帮一个美女发的)她在做一个武汉保洁公司--武汉明紫物业 的网站优化,目前关键词:武汉保洁.武汉保洁公司.武汉清洗.武汉外墙清洗等关键词都排名很好,月色聊人也很佩服她,她刚刚亲手写的软文--分享如何知道让百度蜘蛛来抓取网站信息,如下: 如何免费发布信息 还能被百度收录 真是一件很头大的事 我想大多数网站维护员或是seo看到这个都不觉得奇怪了.21世纪将我们带入了一个以计算机技术为核心的信息时代,打开电脑,各大分类信息网站数不胜数,广告发布.信息推

《精通Wireshark》—第1章1.5节抓取信息的方式

1.5 抓取信息的方式抓取网络数据包有很多不同的方法.管理员可以根据需求的不同,有针对性地对协议分析软件进行配置,并将它部署在网络中的某个位置. 1.5.1 基于集线器的网络基于集线器的网络是最容易抓取数据包的,在这种环境中管理员可以把协议分析软件部署在任何地方,因为集线器会将所有数据包广播到它们所在的整个网络中.有鉴于此,我们根本不用考虑在哪里部署数据包分析软件.然而,集线器亦有其弱点,由于数据包之间会发生冲突,因此集线器网络的性能也会显著降低.由于集线器中没有任何按照优先级转发数据包的机制,

求httpwebquest抓取信息

问题描述 像这样的页面怎么抓取他的内容http://list.lufax.com/list/transfer<divclass="product-info-wrap"><divclass="clearfix"><pclass="product-info-lproduct-info-p2p-l"><spanclass="interest-rate">预期年化利率:${product

php多线程抓取信息测试例子

PHP 5.3 以上版本,使用pthreads PHP扩展,可以使PHP真正地支持多线程.多线程在处理重复性的循环任务,能够大大缩短程序执行时间. PHP扩展下载:https://github.com/krakjoe/pthreads PHP手册文档:http://php.net/manual/zh/book.pthreads.php 1.扩展的编译安装(Linux),编辑参数 --enable-maintainer-zts 是必选项: cd /Data/tgz/php-5.3.8 ./conf

一个从别的网站抓取信息的例子(域名查询

<?   if (isset($xx)) { $dodo=@file("http://www.e9china.com/cgi-bin/comdns.pl?raw=1&lookup=OK&fqdn=".$fqdn."&domain=".$domain."&root=".$root."&cdomain=2.7");    $i=0; while($dodo[$i]) {    echo

一个从别的网站抓取信息的例子(域名查询)_php基础

<?   if (isset($xx)) { $dodo=@file("http://www.e9china.com/cgi-bin/comdns.pl?raw=1&lookup=OK&fqdn=".$fqdn."&domain=".$domain."&root=".$root."&cdomain=2.7");    $i=0; while($dodo[$i]) {    echo