网页数据-想获取网页的一些数据,我应该怎么做呢?或者说我应该去学什么?

问题描述

想获取网页的一些数据,我应该怎么做呢?或者说我应该去学什么?

目标:在某网页上输入用户名密码验证码,再点一些按钮,就可以看到数据。我想做个自动化脚本,可以自动获取到这些数据保存下来。

条件:该网页由Tomcat搭建,我可以操作到这台机器;我会一些VBScript,自动保存没问题,只是不知道怎么获取数据;我会一点PHP,知道一点网页传递数据的原理;

解决方案

一点就是还不会,多学习实践一下

解决方案二:

发送http请求,然后接收返回的网页数据,再分析这些数据,以后保存。这东西叫爬虫。我只懂这么点了。发送请求可以用第三方库,或者自己用socket。要知道一些http协议

解决方案三:

java的写的话 百度 HttpURLConnection 获取访问网页的内容
如果需要高效的获取访问网页内容 百度 网络爬虫

解决方案四:

看看SeleniumIEDriverServer

解决方案五:

你的这个,需要你最好精通 JavaScript 语言,在网页上运行 JavaScript 脚本,那么你可以取得网页上当前显示出来的任何数据

至于自动化操作部分,你使用类似 IdHTTP 这样的就可以

解决方案六:

你能直接操作这台机器的话,那么你直接读取数据库好了,用ADO即可

时间: 2024-11-03 04:45:52

网页数据-想获取网页的一些数据,我应该怎么做呢?或者说我应该去学什么?的相关文章

jqgrid没有后台数据-jqgrid获取不到后台数据,大神帮忙看一下

问题描述 jqgrid获取不到后台数据,大神帮忙看一下 下面是 页面部分: <%@ page language="java" contentType="text/html; charset=utf-8" pageEncoding="utf-8" %> <%@ taglib prefix="c" uri="http://java.sun.com/jsp/jstl/core" %> &l

asp.net中sql server插入数据时获取自增长列数据

最近的数据库编程中需要在执行sql insert后检索自增长列的值.数据库中获取这个值很简单:返回最后插入记录的 自动编号直接使用SELECT IDENT_CURRENT('TableName') 即可. 还可以用如下代码  代码如下 复制代码 select @@identity 在insert后执行这一句就行了.在网上看有人在insert之前加了一句:  代码如下 复制代码 set nocount on; 这一句 表示不要返回查询的行计数. 于是:    代码如下 复制代码 set nocou

java-如何获取网页数据。比如

问题描述 如何获取网页数据.比如 比如一天笑话点开评论后 会有一个评论的列表显示出来. 如何获取评论的数据. 这里本来有个号..我用{表示下同{div> div class="operation-btn"> a href="javascript:void(0)" rel="nofollow" class="comment commentClick" title="评论" obj_info=&qu

c# 提交网络表单之前获取网页数据

问题描述 提交网络表单之前获取网页数据要获取网页的一个数据和COOKIS如果出现了这个错误 解决方案 解决方案二:都GetResponse了,还叫提交之前吗解决方案三:引用1楼shingoscar的回复: 都GetResponse了,还叫提交之前吗 就是要在GetResponse之前有什么办法,cookis和网面里面的数据不用GetResponse没有办法获取解决方案四:再创建个新的request不就行了解决方案五:引用3楼shingoscar的回复: 再创建个新的request不就行了 新建r

OkHttp如何对get方式获取的网页使用post方式发送表单数据?

问题描述 OkHttp如何对get方式获取的网页使用post方式发送表单数据? 我先使用一个get方式获获取了一个网页response,接下来我想用post方法对这个网页传递参数,要怎么锁 解决方案 你描述的2个过程,是没有关系的.向一个网站传递参数,你不用首先get下来获取响应,你获得的东西只是一个静态的内容. 你想用计算机模拟你和网站的交互,你需要正常模拟你访问这个网站,填好数据,并提交,录制下你实际提交出去的数据,然后用okhttp来编程完全模拟,就可以了. 解决方案二: 你这只是加了co

js-如何获取网页内封装的数据

问题描述 如何获取网页内封装的数据 应该如何获取这样一个网页,其中表格里面的那些数据呢? 我希望可以获取这些数据,然后通过处理将它显示在程序中,但是我查看了网页的源码,这些数据并没有直接出现,是封装在什么地方吗? 我应该怎样获取这些数据呢? 网页源码如图,表格中的数据是封装在哪里?又应该通过什么方式获取呢? 解决方案 可能是框架网页,或者ajax异步加载的,用fiddler看下,照着写. 解决方案二: 用javascript动态生成的,用webbrowser等可以获取到页面内容. 解决方案三:

javascript-如何获取网页数据问题。。

问题描述 如何获取网页数据问题.. 软件java网络html 比如一天笑话点开评论后 会有一个评论的列表显示出来. 如何获取评论的数据. 这里本来有个尖括号..我用{表示 下同{div> div class="operation-btn"> a href="javascript:void(0)" rel="nofollow" class="comment commentClick" title="评论&q

andord socket连接网站,怎么获取网页数据

问题描述 andord socket连接网站,怎么获取网页数据 可以连上baidu.com ,但是到readline(),就卡助了...怎么获取数据阿,或者是显示出百度的主页,求救

android-小白 在做Android新闻端 用json获取网页数据 出现如下图的报错 不知道怎么改

问题描述 小白 在做Android新闻端 用json获取网页数据 出现如下图的报错 不知道怎么改 !求告知 怎么改!可以看这个http://ask.csdn.net/questions/232048 private Handler getNewsHandler = new Handler(){ public void handleMessage(android.os.Message msg) { String jsonData = (String) msg.obj; System.out.pri