搜索资源列表
Web-crawler-program-source-code-VC
- 在搜索引擎中,爬虫程序从一系列种子链接中把这些初始网页饿中的URL提出出来,放入URL工作队列,然后遍历所有工作队列中的URL,下载网页并把其中发现的URL再次放入工作队列。-Search engine crawlers from a series of seed link URL in these initial pages hungry out into the URL queue, and then traverse all the work queue URL, the URL agai