网络爬虫程序源码这是一款用C#编写的网络爬虫主要特性有:可配置:线程数、线程等待时间,连接超时时间,可爬取文件类型和优先级、下载目录等。状态栏显示统计信息:排入队列URL数,已下载文件数,已下载总字节数,CPU使用率和可用内存等。有偏好的爬虫:可针对爬取的资源类型设置不同的优先级。健壮性:十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用等、多种策略以解析相对路径等。较好的性能:基于正则表达式的页面解析、适度加锁、维持HTTP连接等。今后有空可能加入的特性:新特性介绍爬取文件用BerkeleyDB存储提高性能:常用操作系统不善于处理大量小文件基于URLRanking的优先级队列主题爬虫:机器学习算法对链接与主题相关度进行评估,并按照得出的优先级顺序进行爬取爬虫礼仪遵循爬虫禁止协议、以及避免对服务器资源的过度使用等性能优化用UDP取代封装好的HttpWebRequest/ResponseDNS缓存异步的DNS地址解析硬盘缓存或内存数据库以避免频繁的磁盘寻道分布式爬虫以扩展单机能力(CPU、内存和硬盘访问)
评分:
更新时间:2010-01-05
浏览次数:25944次
免费
Bootstrapv2.3.2(附带Demo演示)源码源码描述:Bootstrap:简洁、直观、强悍的前端开发框架,让web开发更迅速、简单。源码中附带脚手架,基本CSS样式,组件,JavaScript插件的使用说明示例源码的default.aspx就是根据JS插件的轮播功能修改。欢迎感兴趣的用户下载研究
评分:
更新时间:2013-06-13
浏览次数:20855次
免费
socket测试工具源码功能介绍:1.建立Socket测试服务器端和测试客户端,并向其他端发送或接受报文数据,支持自动发送和自动应答,支持UDP和TCP;2.录入的IP地址和端口等参数数据进行本地XML序列化,下次自动打开。(这个是我需要的,不用每次都录入各种IP地址端口了);3.接受或发送的报文数据,可以直接保存在日志文件当中,便于离线分析。4.服务器端,可以查看接入的各个连接信息;5.支持AscII和16进制的数据发送和接收显示。注意:开发环境为VisualStudio2008
评分:
更新时间:2013-02-04
浏览次数:8974次
免费
312权限管理系统(DWZ)源码源码描述:dwzasp.netmysql简单权限关系系统,权限代码用XML保存简单的dwz使用demo值得一看,不懂之处我也是初学者不好勿喷主要功能有用户管理,权限管理,系统日志和班级管理默认登录名密码均为51aspx
评分:
更新时间:2013-09-23
浏览次数:10156次
免费
Ext.Net由起初的Coolite发展而来,Ext.Net是一个开源的ASP.NET(WebForm+MVC)组件库,对跨浏览器的SenchaExtjsjavascript库进行了封装,其绝大多数组件及功能与Extjs提供的功能一致。加入到VisualStudio(或者VisualWebDeveloper中)项目的说明以下步骤需要手动安装到你的VisualStudio中(2008或2010)或VisualWebDeveloper(2008或2010)Express工具箱中。加入到VisualStudio工具箱----------------------------1、打开VisualStudio或VisualWebDeveloperExpress。2、打开一个现有的网站或创建一个新的网站项目。3、打开或创建一个新的.aspx页面。4、打开“工具箱”面板,通常位于在左侧面板(按Ctrl+Alt+X)。5、创建一个新的“Ext.NET”标签:a右键单击“工具箱”的区域b选择“添加选项卡”c输入“Ext.NET”6、里面的“Ext.NET”标签,右击并选择“选择项...”。7、点击“NET
评分:
更新时间:2012-05-16
浏览次数:12714次
免费
NetronLight工作流软件源码一直想学习的工作流的程序分享给大家--有关画工作流流程的入门程序不知道大家是否接触过Netron,我这个附件中的代码是其中的一些核心基础技术,对想做不同于管理类开发的人员,应该是个很好的入门。很小很精的代码,代码没多少行,想提高编程能力的人应该是很有帮助。程序运行的效果图如下:可以随意拖动,连接线也可以自由设定等等,代码是很早就下载了,没再去网上看看有没有更新的,代码不在于多,在于精,功能不在于复杂在于方便地入门学习和提高。
评分:
更新时间:2009-06-03
浏览次数:17319次
免费
C#简易蜘蛛爬虫程序源码功能介绍:用WebRequest、HttpWebResponse来获取页面的HTML代码,并通过正规表达式得到链接和文本内容页面直接复制到项目中即可注意:开发环境为VisualStudio2008
评分:
更新时间:2012-11-21
浏览次数:11342次
免费
ZXing一二维码编码解码器源码本源码实现可以在C#中使用的1D/2D编码解码器。条形码的应用已经非常普遍,几乎所有超市里面的商品上面都印有条形码;二维码也开始应用到很多场合,如火车票有二维码识别、网易的首页有二维码图标,用户只需要用手机扫描一下就可以看到手机版网易的网址,免去了输入长串字符的麻烦。条形码的标准:条形码的标准有ENA条形码、UPC条形码、二五条形码、交叉二五条形码、库德巴条形码、三九条形码和128条形码等,而商品上最常使用的就是EAN商品条形码。EAN商品条形码亦称通用商品条形码,由国际物品编码协会制定,通用于世界各地,是目前国际上使用最广泛的一种商品条形码。我国目前在国内推行使用的也是这种商品条形码。EAN商品条形码分为EAN-13(标准版)和EAN-8(缩短版)两种。二维码的编码标准:全球现有的二维码多达200种以上,其中常见的技术标准有PDF417(美系标准),QRCode(日系标准),Code49,Code16K,CodeOne,DM(韩系标准),GM(中国标准),CM(中国标准)等20余种。用得最多的是QRcode。下面借助google的开源项目zxing来实
评分:
更新时间:2013-09-05
浏览次数:8677次
免费
WEB生成条码源码功能介绍:使用C#开发的条形码生成使用一般处理程序获取条形码图片,需要的可以下载学习。注意:开发环境为VisualStudio2008
评分:
更新时间:2012-12-28
浏览次数:8578次
免费
WinForm右下角弹框提示源码功能介绍:WinForm下弹框提示信息,可以设置包括上升下降和淡出淡入两种展示方式。标题、内容、实现时间、展示时间、消失时间、展示方式均可自定义注意:开发环境为VisualStudio2008
评分:
更新时间:2013-03-22
浏览次数:7991次
免费
仿Outlook风格界面框架(OSGi.NET插件)源码源码描述:通用WinForm界面框架插件是一个通用的仿Outlook风格的通用界面框架,它为您提供了导航栏和内容区域扩展,支持换肤功能。使用OSGi.NET插件
评分:
更新时间:2013-06-04
浏览次数:10474次
免费
基于三层架构的登录注册程序源码功能描述:实现了简单的登录注册系统,用到了工厂模式,和接口编程,只需通过改配置文件实现Access数据库和SQLServer数据库的切换,数据库连接字段和用户密码都是经过加密的,增强了安全性。web.cofig中value值为SQLserver或SQLAccess;SQLserver则表示连接的是SQLserver数据库;SQLAccess则表示的连接的是Access数据库;两个数据库在数据库App_Data下放着;其中中这个value的值是表示SQLServer连接字串,由于字串是经过DES加密的,程序附带了加密解密工具提示:测试帐号51aspx密码51aspx
评分:
更新时间:2012-03-05
浏览次数:11634次
免费