网页的真实URL

问题描述

本人最近在用C#提取网页源代码的内容,但是有些搜索结果网页的URL是固定的。比如说www.shuangtv.net这个快播网站,如果搜索电影名称,不管搜什么电脑,搜索结果的网页都是固定的URL.这给C#带来了一定的困难,希望高人能指点下怎么能得到这种网页的真实URL,谢谢。

解决方案

解决方案二:
搜索不是http://so.shuangtv.net/search.asp然后post了一个keyword=用fiddler看看网络
解决方案三:
右键,viewsource看打开的txt叫什么名字一般叫XXXX[1]你懂的
解决方案四:
根本不存在什么真实的URL和虚假的URL。有可能你说的情况是网站从postdata中获取了额外的数据,或者发送了301重定向指令。
解决方案五:
用HttpWatchProv跟踪一下
解决方案六:
HttpWatch就可以看到到底向谁请求啥了
解决方案七:
通过FireBug,或者装个smsniff,看看点击搜索发送请求时是怎么个回事,有的是GET方式,有的是POST方式
解决方案八:
...估计你还没搞懂HTTP吧。我只是来混分的
解决方案九:
提交的post请求,用HttpWatch看看,传递的什么
解决方案十:
正如#3楼所说,假设你从浏览器上直接打入url,那么你得到的响应本身就是真实的url,没有什么虚假的。所谓动网站,就是说你需要跟它交互很多次,它根据状态变化而(在相同的url下)输出不同的html内容。这种网站内容是无法被搜索引擎收录的,因此这就是不懂seo或者根本不在乎seo的人做出来的网页。当然,如果是企业管理软件,那么根本不希望seo,这个就很正常。所以所有网页都需要先登录然后才能访问内容。而如果是做宣传用的网页,可就不能搞什么“相同url输出不同结果”这种东西了。

时间: 2024-10-01 08:23:45

网页的真实URL的相关文章

减少HTTP请求之将图片转成二进制并生成Base64编码,可以在网页中通过url查看图片(大型网站优化技术)

原文:减少HTTP请求之将图片转成二进制并生成Base64编码,可以在网页中通过url查看图片(大型网站优化技术) 在网站开发过程中,对于页面的加载效率一般都想尽办法求快.那么,怎么让才能更快呢?减少页面请求 是一个优化页面加载速度很好的方法.上一篇博文我们讲解了 "利用将小图标合成一张背景图来减少HTTP请求",那么,这一篇博文将讲解  " 将图片转成二进制并生成Base64编码,可以在网页中通过url查看图片". 一.为何选择将图片转成二进制并生成Base64编

(java gui) 和 (网页 js) 通过url传值(如json)时,注意问题

(java gui) 和 (网页 js)  通过url传值时,如果不涉及特殊字符可以不进行编码, 但是如果有特殊字符,比如中文,及符号 就要进行编码. java 使用 java.net.URLEncoder.encode(str, "UTF-8");编码, java 使用java.net.URLDecoder.decode(str,"UTF-8");解码, js 使用decodeURIComponent(str);解码 js  使用 encodeURICompone

SEO诊断案例:网页信噪比与URL布局

大家好,我是木子成舟.对于我熟悉的朋友,可能会在我的细嗅蔷薇博客中了解到我对于SEO诊断是非常热衷的,其中一个很重要的原因是通过对不同网站的SEO诊断能够帮助我们提升SEO能力,并且让我们更多的和SEO诊断出来的数据对接,通过数据中的细节变化了解搜索引擎变化,了解用户搜索习惯变化,帮助网站及时调整应对策略. 很多朋友都说做SEO最重要是要有好的执行力,但是我觉得最重要的是要先选对SEO方向,在对的方向上去做好执行,才能更节约时间和精力的去SEO.例如很多站长朋友在操作SEO的时候没有很好的理解S

php 正则替换掉网页中所有超链接 过滤网页中所有Url

正则替换掉网页中所有超链接  代码如下 复制代码 <?php $content = file_get_contents('test.html'); $url = 'http://www.111cn.net';  //要换成的新网址 $preg = '/[s]href=("|')[S]*("|')/i'; $replace = ' href="' . $url . '"'; $content = preg_replace($preg, $replace, $co

java获取网页数据,url所指向的页面不是最终要获取的页面

问题描述 通过http://www.pingan.com/ebusiness/auto/newness/index.do?cityCode=350200&provinceCode=350000访问到页面填写信息后点击确定,跳转到页面,在填写信息后跳转到最终的结果页面而这个页面才是我要抓取的数据页面,求高手帮忙 解决方案 解决方案二:没人么?自己先顶上解决方案三:为什么要抓取别人网站的内容,楼主给我扫扫盲,感觉很好玩的样子解决方案四:人家可以能是A->B用的是get,B->C用的是POS

PHP获取301重定向页面跳转后真实URL地址

获取301状态肯定没问题.  代码如下 复制代码 function getrealurl($url){  $header = get_headers($url,1);  if (strpos($header[0],'301') || strpos($header[0],'302')) {   if(is_array($header['Location'])) {    return $header['Location'][count($header ['Location'])-1];   }el

php 正则表达式提取网页超级链接url的函数_正则表达式

复制代码 代码如下: function match_links($document) { preg_match_all("'<\s*a\s.*?href\s*=\s*([\"\'])?(?(1)(.*?)\\1|([^\s\>]+))[^>]*>?(.*?)</a>'isx",$document,$links); while(list($key,$val) = each($links[2])) { if(!empty($val)) $mat

php 正则表达式提取网页超级链接url的函数

复制代码 代码如下: function match_links($document) { preg_match_all("'<\s*a\s.*?href\s*=\s*([\"\'])?(?(1)(.*?)\\1|([^\s\>]+))[^>]*>?(.*?)</a>'isx",$document,$links); while(list($key,$val) = each($links[2])) { if(!empty($val)) $mat

关于网页代码加密解密保护

加密|解密|网页 文本代码保护是件很头痛的事,随着了解的加深保护的方法越多,也就意味着漏洞越多. [-调取原代码的方法-] 1:右键 - 查看原文件 2:查看 - 原文件 3:文件 - 另存为 4:IE缓存 5:还可以通过代码提取 教程代码: <SCRIPT> function add() { var ress=document.forms[0].it315zhangxx.value window.location="view-source:"+ress; } </S