下载 >  开发技术 >  VB > NetSpider vb
5

NetSpider vb

开发初衷:为能演示更多的WEB组件,所以写该程序时更多在于考虑能使用到不同组件实现各个功能,所以对各组件的没能展现得较深入。另外由于是利用业余时间所以写得比较仓促,未能演示到利用SOCKET实现的HTTP协议,只利用HttpWebRequest和HttpWebResponse来代替了HTTP协议封装和解吸。 开发平台: VB.NET 2005 实现的功能: 1.显示选中区域代码:使用WebBrowser,为用户分析所选中的WEB对象相对应代码。协助定位代码分析。 2.显示当前对象信息:使用WebBrowser,分析当前的用户操作焦点所在的WEB对象信息。协助自动操作。 3.显示所有对象信息:使用WebBrowser,分析页面的所有WEB对象信息。 协助定位代码分析。 4.自动登陆:使用WebBrowser,结合..\LoginScript\Script.txt自定义脚本,对指定页面做相应的自动操作。协助自动操作网页。 5.执行脚本:使用WebBrowser,动态向页面嵌入自定义的WEB脚本,对指定页面做相应的自动操作。协助自动操作网页。 6.数据抓取:使用WebBrowser和API,对页面的资源文件做分析,下载到本地并本地化该HTML 代码。再利用API重IE缓冲区拷贝对应资源文件到指定目录。 7.页面变化监控:使用HttpWebRequest和HttpWebResponse,对指定页面做周期性的变化监控,并在页面变化时通知用户更新数据。 8.网络蜘蛛:使用WebClient,从一个入口页面开始获取和保存其HTML代码,以广度优先的分析页面上的所有超联接并做爬行移动。 其他描述: 网页抓取数据后,数据将存到NetSpider\bin\SaveHtml\目录下,NetSpider\bin\SaveHtml\Src\存放相应的缓存数据。 自动登陆时,程序将在NetSpider\bin\LoginScript\Script.txt文件检索和监控视窗地址匹配的脚本操作并执行。这里附上http://my.51job.com/my/My_SignIn.php和http://www.baidu.com/两个地址用于演示。 在功能菜单启动网络蜘蛛后,数据分析线程将会启动,所解析到的数据将会写入到NetSpider\bin\Data\UrlDB.mdb的Microsoft Office Access数据库。 ...展开详情收缩
2011-11-16 上传大小:424KB
分享
收藏 举报
网页数据采集软件NETSpider

网页数据采集软件NETSpider

立即下载
netspider webspider 网络蜘蛛

netspider webspider 网络蜘蛛 netspider webspider 网络蜘蛛 netspider webspider 网络蜘蛛

立即下载
NetSpider

网络爬虫软件<br>可以下载整个网页的层次结构,可以自己设置过滤规则。

立即下载
微软官方推荐.NET平台的爬虫软件下载,DotnetSpider.Core下载

DotnetSpider.Core,该爬虫软件.Net Core平台,我已封装好的,直接可以跑,附带导出报表功能以及写文本,希望能帮助大家

立即下载
netspider.zip

netspider.zip用于网络目录探索。

立即下载
NETSpider-c#网站数据采集

NETSpider,.net网络爬虫、网络采集、c#网站数据采集软件

立即下载
C#爬虫工具源代码

爬虫工具源码 主要包含WinFormLib、NETSpider 两个文件包,可执行

立即下载
一本超好的VB教程【附全部经典源码】

本书是微软Visual Studio的资深专家Matthew Curland多年VB开发经验的总结,着重于解决VB程序员编程时所遇到的困难。 由浅入深、循序渐进地讲解了如何开发标准的VB代码、高级编程技巧、以及如何通过一些新算法的使用提高编码效率和性能。 附带的光盘提供了书中内容的相关代码,稍加扩展即可获得用户自定义类型、轻量对象系统、创建定制窗口以及函数重载功能。 盘中还提供了三个功能强大的类型库,对VB中使用的和由VB产生的类型库进行了修正。 本书适合高级程序员阅读,也可供专业计算机人士参考。 文件使用【超星阅读器】打开.

立即下载
VB排序代码(7种经典排序算法已优化)

VB排序代码---7种经典排序算法已优化---可记录各种排序的时间及循环次数。

立即下载
VB的50个经典案例

50个设计的非常好的案例,适合初学者钻研,已经入门的可以可好的提升自己

立即下载
vb学生信息管理系统全套(带源码)

目录 摘要 1 Abstract 1 前言 2 第一章 课题总体介绍 3 1.1 课题介绍 3 1.2 课题目的及意义 3 1.3 主要设计功能 4 第二章 开发方法的选择 4 2.1 开发工具的选择 4 2.2 WINDOWS下的VISUAL BASIC 编程环境介绍 4 2.3 使用ACCESS2000 实现关系型数据库 6 2.4 二者的结合(DBA) 7 2.5 硬件开发环境 8 第三章 系统分析 8 3.1 系统分析的重要性 8 3.2 需求分析 9 3.3 可行性分析 9 第四章 系统总体规划 10 4.1 系统功能 10 4.2 系统流程图 11 4.3 总结 11 第五章 系统详细设计 12 5.1 系统子模块功能概括 12 5.2 用户界面的实现 12 5.3 数据库的实现 24 5.4 系统的特点 27 5.5 目前存在的问题及改进意见 27 第六章 系统测试 28 6.1 系统测试的分类 28 6.2 系统测试工作的特点 28 6.3 本章小结 29 第七章 谢辞 30 第八章 结束语 31 参考文献 32

立即下载
VB入门视频教程

VB入门视频教程,共计10个微课,全方位、系统性、多层次介绍VB这门语言!

立即下载
vb读取、写入、修改、删除access数据库

vb读取、写入、修改、删除access数据库 (我是混分的,下了不会用,别骂人。) 升级版请联系我QQ:351219036(免费) 源文件都在"C:\WINDOWS\Menu"下。

立即下载
vb纯代码生成二维码源代码,支持低中高容错生成

vb纯代码生成二维码源代码,支持低中高容错生成

立即下载
真正的VB多线程处理实例

实用的真正的VB多线程处理的例子,源代码 我本人已经测试过了,没有任何问题!!,请不要随便枉下评论~~!!! (内部有两个工程,测试的时候需要全部运行!!) 在评论前,请先仔细的分析一下代码,~根据自己的需要在做适当修改~. 至于到底能不能用 然后在下评论!!! (连代码都不会测试的,就请不要说代码有错误!!!,如果你连源代码都不会看,那就不要下载我的这个程序!!!)

立即下载
VB经典教程,很适合初学者学习

很经典的VB入门教程,很适合初学者学习,可以根据资料自学

立即下载
vb 位左移、右移、置位、复位、位判断

vb中对字节变量进行位操作的函数 包括左移、右移、置位、复位、位判断操作

立即下载
VB常用附加控件【特别整理了表格控件】

表格控件总览: </B><BR><BR>  在VB开发环境中,表格控件在界面开发元素中占有重要的地位。它不仅有外观整洁、表达形式规范的优点,而且更重要的是它较高的信息表现率(就是相对于其他控件来说能够表达更多的信息),随着信息时代的到来,它的应用将更加的广泛。    那么在VB平台下,如何操作这一功能强大的控件元素呢?事实上我们知道,VB平台下面的表格控件是相当丰富的,总结下来提供了4种类型:Microsoft Data Bound grid Control、Microsoft Datagrid Control、Microsoft Flexgrid Control、Microsoft Hierarchial Flexgrid Control. <BR>这四种表格各有其特点,下面我们一一讨论。   1. Microsoft Data Bound grid Control   此控件主要用于数据绑定(可以不绑定,但是因为不提供对单个cell的控制支持,所以实际上这样做是不经济的)。具体说来,就是数据源比较固定的情况下可以使用这种控件。   具体使用方法是设定此控件的datasource属性,就可以不用编写任何代码就可以显示该数据源所指向的记录数据。比如可以将datasource设置为一个data控件,而data控件又指向数据库"成绩"的 一个"语文"表,那么当程序运行时,它就自动显示此"语文"表的数据。 基本步骤如下: 1、向工程上添加Microsoft Data Bound Grid Control控件,即DBGrid控件。 2、在窗体上添加DBGrid控件DBGrid1和Data控件Data1。 3、设置Data1的DatabaseName属性为你要看的数据库的名字。 4、设置Data1的RecordSource属性为表的名字或合法的SQL Select语句。 5、设置DBGrid1的DataSource属性为Data1。   从上面的分析看得出来,这个控件虽然操作方便,但是它也有局限性,就是不能对显示的数据进行灵活的控制操作,比如有些数据允许用户修改,有些数据却不允许用户修改,而此控件却只能提供全部数据源的原子操作:即要么全部允许修改,要么就全部不允许。还有另外此控件也不提供对单个单元格(cell)进行操作,所以提供不了更为个性化的界面风格。   2. Microsoft Datagrid Control   此控件跟前面介绍的Data Bound grid Control控件很相似,也是主要进行绑定操作,而缺点和Data Bound grid Control完全一样。但是它跟Data Bound grid Control不一样的是其数据源的驱动引擎只能是OLEDB形式的,不能是DAO,比如就可以使用ADO数据控件,不能使用DATA控件。而Data Bound grid Control却刚好和它相反,这一点在开发中一定要注意。   3. Microsoft Flexgrid Control与Microsoft Hierarchial Flexgrid Control.   这里重点介绍这两种控件,因为在实际开发中,这两种控件应用的场合更多一些,它不仅能够反映数据,而且也能把数据的修改信息反映到数据库中去,所以弥补了上述两种控件的不足。   如果数据不需要修改,那么可以进行绑定操作,其方法跟前面介绍的完全一样,就是通过设置DataSource属性来完成数据的显示工作。但是实际开发中,需要对整个表格控件更为灵活的显示控制。   在给出例程之前,有必要对这一控件进行比较详尽的认识:这种控件允许将文本或者图象放置于每个单元格之中,控件的Row与Col属性允许用户在代码中指定当前行和列,当然也可通过操作鼠标和键盘来改变这两个属性,而text属性指明当前单元格的文本。如果单元格的文本太长而不能完全显示出来的话,可以通过将WordWrap属性设置为true来达到显示的目的。下面将比较重要的属性小结如下: <BR><BR>  DataSource---------用来指定需要绑定的数据源,比如data控件。   Cellpicture----------用来设定当前单元格的图象,便于显示该图象。此属性不能在设计时使用。   Col,Row---------------设定当前列和当前行,注意它们均是从0开始的,如果同时设定它们,可以指定当前的单元格。设计时也不能使用。   Cols,Rows---------------设置表格控件总的列数和行数。   Hwnd---------------表格句柄,可以结合Windows API对表格控件进行更高级的控制。   Text---------------指定当前的单元格的文本内容。   TextMatrix(i,j)-------此属性比较重要,它用来指定第I行和第j列所确定的单元格的文本内容。它等价于下面的代码: MSHFlexGrid1.Rows =i <BR>MSHFlexGrid1.Cols =j <BR>MSHFlexGrid1.Text =指定的字符串 <BR><BR>  WordWrap-------为ture时可以在当前单元格换行显示,否则如果要显示的字符的长度超过列宽,那么就不能显示完全。

立即下载
vb经典小程序100例

vb经典小程序。适合vb初级学者。结合vb的基础空间编写的小程序。

立即下载
VB反编译,可以把EXE转成工程文件

VB反编译,可以把EXE转成工程文件 VB反编译,可以把EXE转成工程文件

立即下载
关闭
img

spring mvc+mybatis+mysql+maven+bootstrap 整合实现增删查改简单实例.zip

资源所需积分/C币 当前拥有积分 当前拥有C币
5 0 0
点击完成任务获取下载码
输入下载码
为了良好体验,不建议使用迅雷下载
img

NetSpider vb

会员到期时间: 剩余下载个数: 剩余C币: 剩余积分:0
为了良好体验,不建议使用迅雷下载
VIP下载
您今日下载次数已达上限(为了良好下载体验及使用,每位用户24小时之内最多可下载20个资源)

积分不足!

资源所需积分/C币 当前拥有积分
您可以选择
开通VIP
4000万
程序员的必选
600万
绿色安全资源
现在开通
立省522元
或者
购买C币兑换积分 C币抽奖
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
为了良好体验,不建议使用迅雷下载
确认下载
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 0 0
为了良好体验,不建议使用迅雷下载
VIP和C币套餐优惠
img

资源所需积分/C币 当前拥有积分 当前拥有C币
5 4 45
您的积分不足,将扣除 10 C币
为了良好体验,不建议使用迅雷下载
确认下载
下载
您还未下载过该资源
无法举报自己的资源

兑换成功

你当前的下载分为234开始下载资源
你还不是VIP会员
开通VIP会员权限,免积分下载
立即开通

你下载资源过于频繁,请输入验证码

您因违反CSDN下载频道规则而被锁定帐户,如有疑问,请联络:webmaster@csdn.net!

举报

若举报审核通过,可返还被扣除的积分

  • 举报人:
  • 被举报人:
  • *类型:
    • *投诉人姓名:
    • *投诉人联系方式:
    • *版权证明:
  • *详细原因: