c# 如何读取网页上的数据 求大神指点

问题描述

请问大神们:如何读取网页上的数据求1、我想要读取网页上的信息,比如要获取百度贴吧一个帖子里所有的内容2、帖子有很多页,怎么继续按下一页继续读取呢?这里面需要什么方法或者控件,求大神给点思路和指导下!!!最好留个QQ请教

解决方案

解决方案二:
求代码求思路求大大
解决方案三:
通过当前页获取,获取后面页面,
解决方案四:
http://blog.csdn.net/X___V/article/details/8605946怎么获取内容,网上很多。主要获取到要怎么分析有用的
解决方案五:
引用3楼u013421223的回复:

http://blog.csdn.net/X___V/article/details/8605946怎么获取内容,网上很多。主要获取到要怎么分析有用的

如果说要操作网页的内容要怎么做呢,比如搜索按钮可以详细点说明吗
解决方案六:
http://club.excelhome.net/thread-893760-1-1.html看这个教程
解决方案七:
httprequest+regexp
解决方案八:
htmlagilitypack
解决方案九:
首先要看懂HTML语言比如知道按钮执行了什么方法。然后用C#模拟调用该方法。
解决方案十:
先读取页面html然后正则需要的内容提取就好了
解决方案十一:
引用9楼wy811007的回复:

先读取页面html然后正则需要的内容提取就好了

读取不到网页的内容,只能读取到框架,像成交记录这种读取不到,我是要读取淘宝网页
解决方案十二:
引用5楼liucqa的回复:

http://club.excelhome.net/thread-893760-1-1.html看这个教程

读取不到网页的内容,只能读取到框架,像成交记录这种读取不到,我是要读取淘宝宝贝详情页,一些像用户名之类的读取不了
解决方案十三:
引用7楼u010200878的回复:

htmlagilitypack

还用不到,读取这一布过不了
解决方案十四:
百度贴吧?模拟HTTP提交,抓包分析,然后该GET的GET,该POST的POST,至于返回数据,百度贴吧的图片,返回的是JSON,这点可以确定。帖子内容返回的应该也是JSON,可能是部分数据,需要不停的GET、POST下一页。如果返回的不是JSON,可以直接解析HTML,提取你需要的内容。如果多页,且不是一次性返回全部数据的情况下,就要考虑用循环提交。先找到总页数,比如总页数150页。写个循环,模拟GET提交for(inti=0;i<150;i++){.....?pag=i}每循环一次取一次数据,然后进行数据提取和解析。

时间: 2024-07-31 17:36:54

c# 如何读取网页上的数据 求大神指点的相关文章

小弟网上下载的ASP.NET网站运行链接不上数据库。求大神指点。

问题描述 谢谢.本人Q415249982,求大神帮忙. 解决方案 解决方案二:一般来说,看错误提示.估计像你这样的,什么都不会,代码也是从哪里剽窃来的.因此问题应该主要是数据库配置如果是找不到sql实例名,那么检查你的链接字符串的ip.实例名.sqlserver是否启用远程访问,防火墙.如果是sa登录失败,检查用户密码.权限.账户.解决方案三:ASP.NET网站如何链接数据库//Web.Config页面链接数据库信息<appSettings><addkey="conStr&qu

android 图文上传 后台java获取不到数据 求大神指点

问题描述 HttpClientclient=newHttpClient();//client.getParams().setParameter(CoreProtocolPNames.PROTOCOL_VERSION,HttpVersion.HTTP_1_1);PostMethodpost=newUTF8PostMethod(Utils.URL_SERVER2+POST_PATH);Stringresult="";try{map.put("createAgent",C

大数据-ajax异步请求数据问题。。。看不出哪里错了。。。跪求大神指点。。。

问题描述 ajax异步请求数据问题...看不出哪里错了...跪求大神指点... 我做ajax读取Excel表格里的数据...这是JAVA代码 java: public static List<HashMap<Object,Object>> readExcel(String excelPath){ //声明一个集合用于存储解析出来的数据 List<HashMap<Object,Object>> maps = new ArrayList<HashMap&l

gdal-GDAL读取tif数值出现问题?急求大神指点!!!!!

问题描述 GDAL读取tif数值出现问题?急求大神指点!!!!! 5C 文件是用arcgis软件分类后存储的tif文件,分了20个类,灰度值应该是1-20之间的整数值,在arcgis软件中显示是这样的正常值,但是用VS2010+GDAL中读取时会出现灰度值不是这个,总是32768或0啊什么的值.我程序读取网上下载的原始geotiff的高程数据是完全没问题的,分类后的数据怎么就读不出来了呢?我写了个大致代码如下,望大神给我分析一下,第一天注册CSDN,谢谢! #include ""std

android-Android 实现读取身份证信息怎么完成,求大神指点!!!

问题描述 Android 实现读取身份证信息怎么完成,求大神指点!!! Android 实现读取身份证信息怎么完成,求大神指点!!! 解决方案 你是照片读取?像扫描二维码那样读取身份证上的内容?还是nfc识别身份证信息? 解决方案二: 具体的需求是什么 取身份证信息 你们是要怎么读取 提供什么来进行读取? 解决方案三: 百度"Android识别身份证银行卡"你会找到你想要的 解决方案四: 具体需求是什么,是不是拍照身份证,读取身份证的信息?

数据库 时间戳 时间-数据库时间读取便变成时间戳,求大神。

问题描述 数据库时间读取便变成时间戳,求大神. 我的MySQL数据库的时间字段类型是timestamp 数据库的字段时间是根据当前时间自动生成的.但从数据库查询到数据显示到页面上就成了时间戳.在后台代码加了断点,发现从数据库取到了就是时间戳.当我把显示到页面的时间戳输到时间转换工具里面时发现转换出来的,并不是标准时间. 解决方案 1.后台转 2.前台转

base64-android http 文件上传遇见的难题!!!求大神指点!!!

问题描述 android http 文件上传遇见的难题!!!求大神指点!!! 要做一个大文件分块上传的功能,多个文件打包成zip,zip包中有个txt文件用来存放文件信息. 我是用FileInputStream 读取文件,根据服务端给的接口要求,每次读7K,读完一次就把装了7K文件的byte[] 转成Base64字符串,然后post传给服务端,传成功后开始传第二个小块..... 现在的问题是: 当文件小于7K,也就是一次就能读完的时候,文件能转成正确的Base64字符串,传给服务端后也能正常解压

javascript-跪求大神指点一下思路上的问题

问题描述 跪求大神指点一下思路上的问题 HTML代码如下: <div id="sj"> <a href="#"><img src="img/y.png" newsrc="img/y1.png" >12</a> <a href="#"><img src="img/y2.png" newsrc="img/y22.pn

c++问题-在acm上刷题老是通不过,求大神指点一二,到底问题出在哪里。不胜感激!!!

问题描述 在acm上刷题老是通不过,求大神指点一二,到底问题出在哪里.不胜感激!!! #include #include using namespace std; int main() { int T; int k,t=0; int i, j, n1, n2; char a[1010], b[1010], c[1015]; string d[20], e[20], f[20]; cin>>T; for(k=1; k<=T; k++) { cin>>a>>b; d[