搜索资源列表
Music-Search
- 面向音乐搜索的垂直搜索软件是采用Java语言开发的简易的互联网音乐搜索引擎,它是集网络爬虫(采用java内置的多线程及Socket技术)和基于B/S结构的Web查询(Struts框架)为一体的搜索软件。可用于本科毕业设计。-Music Search Software
YukiSpider
- 基于HttpClient4.0的网络爬虫基本框架(Java实现)-Analog HTTP request: HttpClient 4.0 Target page structure analysis, HTTP request header information analysis: Firefox+ firebug/Chrome (F12 developer mode) HTML parsing: Jsoup
webmagic
- 开源的Java垂直爬虫框架,目标是简化爬虫的开发流程,让开发者专注于逻辑功能的开发。webmagic的核心非常简单,但是覆盖爬虫的整个流程,也是很好的学习爬虫开发的材料。作者曾经在前公司进行过一年的垂直爬虫的开发,webmagic就是为了解决爬虫开发的一些重复劳动而产生的框架。-Open source Java vertical crawler framework, the goal is to simplify the development process of reptiles, allo
DownloadProxy
- webmagic框架实现网络爬虫,用java语言实现为爬虫添加代理(Using java language to add agents for reptiles)
java网络爬虫
- 是一个无须配置、便于二次开发的JAVA爬虫框架(内核),它提供精简的的API,只需少量代码即可实现一个功能强大的爬虫(Is a JAVA reptile framework (kernel) that does not need to be configured for easy development. It provides a streamlined API that requires a small amount of code to implement a powerful crawl