下载 >  开发技术 >  VB > NetSpider vb

NetSpider vb

2011-11-16 上传大小:424KB
开发初衷:为能演示更多的WEB组件,所以写该程序时更多在于考虑能使用到不同组件实现各个功能,所以对各组件的没能展现得较深入。另外由于是利用业余时间所以写得比较仓促,未能演示到利用SOCKET实现的HTTP协议,只利用HttpWebRequest和HttpWebResponse来代替了HTTP协议封装和解吸。

开发平台: VB.NET 2005

实现的功能:
	1.显示选中区域代码:使用WebBrowser,为用户分析所选中的WEB对象相对应代码。协助定位代码分析。
	2.显示当前对象信息:使用WebBrowser,分析当前的用户操作焦点所在的WEB对象信息。协助自动操作。
	3.显示所有对象信息:使用WebBrowser,分析页面的所有WEB对象信息。
协助定位代码分析。
	4.自动登陆:使用WebBrowser,结合..\LoginScript\Script.txt自定义脚本,对指定页面做相应的自动操作。协助自动操作网页。
	5.执行脚本:使用WebBrowser,动态向页面嵌入自定义的WEB脚本,对指定页面做相应的自动操作。协助自动操作网页。
	6.数据抓取:使用WebBrowser和API,对页面的资源文件做分析,下载到本地并本地化该HTML
                            代码。再利用API重IE缓冲区拷贝对应资源文件到指定目录。
	7.页面变化监控:使用HttpWebRequest和HttpWebResponse,对指定页面做周期性的变化监控,并在页面变化时通知用户更新数据。
	8.网络蜘蛛:使用WebClient,从一个入口页面开始获取和保存其HTML代码,以广度优先的分析页面上的所有超联接并做爬行移动。

其他描述:
    网页抓取数据后,数据将存到NetSpider\bin\SaveHtml\目录下,NetSpider\bin\SaveHtml\Src\存放相应的缓存数据。
    自动登陆时,程序将在NetSpider\bin\LoginScript\Script.txt文件检索和监控视窗地址匹配的脚本操作并执行。这里附上http://my.51job.com/my/My_SignIn.php和http://www.baidu.com/两个地址用于演示。
    在功能菜单启动网络蜘蛛后,数据分析线程将会启动,所解析到的数据将会写入到NetSpider\bin\Data\UrlDB.mdb的Microsoft Office Access数据库。                        
...展开收缩
综合评分:5
开通VIP 立即下载

评论共有4条

q420136778 2014-02-13 21:26:10
功能说的很清楚,代码写的很清晰,很具有参考学习价值
bazzi_com_cn 2013-03-23 18:47:59
代码很工整,详细,还有解说,不但可以学习,还可以直接运行当作工具使用!
zst_0001 2012-08-03 13:06:16
代码很长。。。。不过还好功能实现得都还可以
 
网页数据采集软件NETSpider 立即下载
积分/C币:3
netspider webspider 网络蜘蛛 立即下载
积分/C币:3
NetSpider 立即下载
积分/C币:3
NETSpider-c#网站数据采集 立即下载
积分/C币:3
C#爬虫工具源代码 立即下载
积分/C币:5
漂亮的VB窗体界面设计 立即下载
积分/C币:3
一款 VB反编译工具 立即下载
积分/C币:5
一本超好的VB教程【附全部经典源码】 立即下载
积分/C币:13
VB 源代码大全 适合初学者 立即下载
积分/C币:3
七种常见的VB排序算法示例程序 立即下载
积分/C币:5

VIP会员动态

0 1 2
关闭
img

spring mvc+mybatis+mysql+maven+bootstrap 整合实现增删查改简单实例.zip

资源所需积分/C币 当前拥有积分 当前拥有C币
5 0 0
点击完成任务获取下载码
输入下载码
为了良好体验,不建议使用迅雷下载
img

NetSpider vb

会员到期时间: 剩余下载个数: 剩余C币: 剩余积分:0
为了良好体验,不建议使用迅雷下载
VIP下载
您今日下载次数已达上限(为了良好下载体验及使用,每位用户24小时之内最多可下载20个资源)

积分不足!

资源所需积分/C币 当前拥有积分
您可以选择
开通VIP
4000万
程序员的必选
600万
绿色安全资源
现在开通
立省522元
或者
购买C币兑换积分 C币抽奖
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
为了良好体验,不建议使用迅雷下载
确认下载
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 0 0
为了良好体验,不建议使用迅雷下载
开通VIP
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
您的积分不足,将扣除 10 C币
为了良好体验,不建议使用迅雷下载
确认下载
下载
无法举报自己的资源

兑换成功

你当前的下载分为234开始下载资源
你还不是VIP会员
开通VIP会员权限,免积分下载
立即开通

你下载资源过于频繁,请输入验证码

您因违反CSDN下载频道规则而被锁定帐户,如有疑问,请联络:webmaster@csdn.net!

举报

若举报审核通过,可返还被扣除的积分

  • 举报人:
  • 被举报人:
  • 举报的资源分:
  • *类型:
  • *详细原因: