CDN加速镜像 | 设为首页 | 加入收藏夹
登陆 | 会员注册
当前位置： 首页 资源下载 源码下载 Windows编程 C#编程
收藏

文件名称:nwebcrawlercSharp

  • 所属分类：
    CSharp
  • 标签属性：
    [Windows] [Visual.Net] [源码]
  • 上传时间：
    2012-11-16
  • 文件大小：
    2.02mb
  • 已下载：
    1次
  • 提 供 者：
    c***
  • 相关连接：
    无
  • 下载说明：
    别用迅雷下载，失败请重下，重下不扣分！
修正介绍说明

介绍说明－－下载内容来自于网络，使用问题请自行百度

可配置：线程数、线程等待时间，连接超时时间，可爬取文件类型和优先级、下载目录等。

状态栏显示统计信息：排入队列URL数，已下载文件数，已下载总字节数，CPU使用率和可用内存等。

有偏好的爬虫：可针对爬取的资源类型设置不同的优先级。

健壮性：十几项URL正规化策略以排除冗余下载、爬虫陷阱避免策略的使用-c# crawler Threads
(系统自动生成,下载前可以参看下载内容)

下载文件列表

BuildProcessTemplates/
BuildProcessTemplates/DefaultTemplate.xaml
BuildProcessTemplates/UpgradeTemplate.xaml
data/
data/crawlerdb.s3db
data/pdc_09.txt
data/sina_12_28.txt
data/spider.ico
lib/
lib/x64/
lib/x64/System.Data.SQLite.dll
lib/x64/System.Data.SQLite.lib
lib/x86/
lib/x86/System.Data.SQLite.dll
lib/x86/System.Data.SQLite.lib
setup/
setup/build.cmd
setup/Files.wxs
setup/license.rtf
setup/Setup.wxs
setup/wix3/
setup/wix3/candle.exe
setup/wix3/darice.cub
setup/wix3/light.exe
setup/wix3/wconsole.dll
setup/wix3/winterop.dll
setup/wix3/wix.dll
setup/wix3/WixUIExtension.dll
src/
src/NWebCrawler.sln
src/NWebCrawlerLib/
src/NWebCrawlerLib/Common/
src/NWebCrawlerLib/Common/FileSystemUtility.cs.cs
src/NWebCrawlerLib/Common/Logger.cs
src/NWebCrawlerLib/Common/PriorityQueue.cs
src/NWebCrawlerLib/Common/SQLiteUtility.cs
src/NWebCrawlerLib/CrawlerThread.cs
src/NWebCrawlerLib/CrawlHistroyEntry.cs
src/NWebCrawlerLib/Downloader.cs
src/NWebCrawlerLib/EventStream.cs
src/NWebCrawlerLib/MemCache.cs
src/NWebCrawlerLib/NWebCrawlerLib.csproj
src/NWebCrawlerLib/PageRank.cs
src/NWebCrawlerLib/Parser.cs
src/NWebCrawlerLib/Program.cs
src/NWebCrawlerLib/Properties/
src/NWebCrawlerLib/Properties/AssemblyInfo.cs
src/NWebCrawlerLib/Properties/Resource.en-US.resx
src/NWebCrawlerLib/Properties/Resource.zh-CN.resx
src/NWebCrawlerLib/ResourceCulture.cs
src/NWebCrawlerLib/Settings.cs
src/NWebCrawlerLib/UrlQueueManager.cs
src/NWebCrawlerLib/Utility.cs
src/NWebCrawler/
src/NWebCrawler/app.config
src/NWebCrawler/config.ini
src/NWebCrawler/MainForm.cs
src/NWebCrawler/MainForm.Designer.cs
src/NWebCrawler/MainForm.resx
src/NWebCrawler/NWebCrawler.csproj
src/NWebCrawler/Program.cs
src/NWebCrawler/Properties/
src/NWebCrawler/Properties/AssemblyInfo.cs
src/NWebCrawler/Properties/Resources.Designer.cs
src/NWebCrawler/Properties/Resources.resx
src/NWebCrawler/Properties/Settings.Designer.cs
src/NWebCrawler/Properties/Settings.settings
src/NWebCrawler/SettingsForm.cs
src/NWebCrawler/SettingsForm.Designer.cs
src/NWebCrawler/SettingsForm.resx
test/
test/NWebCrawler.Test/
test/NWebCrawler.Test/NWebCrawler.Test.sln
test/NWebCrawler.Test/NWebCrawler.Test/
test/NWebCrawler.Test/NWebCrawler.Test/NormalizeTest.cs
test/NWebCrawler.Test/NWebCrawler.Test/NWebCrawler.Test.csproj
test/NWebCrawler.Test/NWebCrawler.Test/ParserTest.cs
test/NWebCrawler.Test/NWebCrawler.Test/Properties/
test/NWebCrawler.Test/NWebCrawler.Test/Properties/AssemblyInfo.cs

相关说明

  • 本站资源为会员上传分享交流与学习,如有侵犯您的权益,请联系我们删除.
  • 搜珍网是交换下载平台，只提供交流渠道，下载内容来自于网络，除下载问题外，其它问题请自行百度。更多...
  • 本站已设置防盗链，请勿用迅雷、QQ旋风等下载软件下载资源，下载后用WinRAR最新版进行解压.
  • 如果您发现内容无法下载，请稍后再次尝试；或换浏览器；或者到消费记录里找到下载记录反馈给我们.
  • 下载后发现下载的内容跟说明不相乎，请到消费记录里找到下载记录反馈给我们，经确认后退回积分.
  • 如下载前有疑问，可以通过点击"提供者"的名字，查看对方的联系方式，联系对方咨询.
查看所有评论

相关评论

暂无评论内容．

发表评论

*快速评论： 推荐 一般 有密码 和说明不符 不是源码或资料 文件不全 不能解压 纯粹是垃圾
*内　　容：
*验 证 码：
搜珍网 www.dssz.com