搜索资源列表
htmlUnit
- 输入当前链接 可爬取当前网页所有链接并返回(Enter the current link, crawl all links from the current page, and return)
JMKTCrawler
- 这个是爬虫代码，可以爬取JMR期刊的代码(This is the crawler code that can crawl the JMR journal code)
spider-master
- 能够爬取所有车辆的信息，并且保存起来json里面 爬取所有url(Family car of the reptile, crawling on all models car home, save as excel format)
1
- 可以通过读取文本文件中的内容，在百度搜索引擎中爬取相应的图片(You can crawl the pictures in the Baidu search engine by reading the contents of the text file.)
爬取对应词汇页面量
- 这次要分享的内容十分简单，但也可以算是我们以后写东西可能会经常用到的一个小工具，就是关于如何爬取百度文库对应某个词汇的词条数，也就是拥有的页面量。(The content to be shared is very simple, but it can also be a small tool that we will often use to write later. It's about how to crawl the number of entries that Baidu library
爬虫
- 根据空间坐标，爬取网站未来15天，天气预报(According to the space coordinates, climb the site for the next 15 days, weather forecast)
first
- 爬取二维码图片，解析二维码，最后decode。(Climb a two-dimensional code picture, analyze the two-dimensional code, and finally decode.)
webmagic
- webmagic实现网络爬取，java代码实现(Network crawling by webmagic)
zhp
- python2.7爬取飞猪网特价机票 用户输入所在地和目的地即可看到符合要求特价机票并按省份归类(Python2.7 crawling to fly pig net special ticket The user can enter the location and destination to see the requested special ticket and classify the ticket according to the province)
paqu
- 百度搜索热点新闻自动爬取，转存到数据库后台并在前台显示相应的数据库界面(spider based on baidu-news)
mtianyanSearch
- 可爬取知乎、拉钩上的信息并存储到elasticsearch数据库，可以供api访问(It can crawl information on knowledge and hook and store it to elasticsearch database, which can be accessed by API.)
blog v2.0
- 爬取专家博文，在CSDN的首页有专家推荐列表，进入个人中心爬取其博文并保存(Climb the expert idiqoiwejdoiwedwedwewdew)
scy
- 利用scrapy框架，实现爬取校花网所有姓名(To get all the names of the school flower net)
sohugupiao
- 基于搜狐财经API的股票数据爬取函数，结果为十列数据“十列数据，含义：日期，开盘价，收盘价，涨跌额，涨跌幅，最低价，最高价，成交量，成交额，换手率”。(Based on Sohu financial API's stock data crawling function, the result is ten columns of data "ten columns of data, meaning: date, opening price, closing price, rise and
爬取中国大学排名
- 利用python，爬取中国大学排名榜单，的通用模板。非常好用，内含注释，可以自己学习，自己根据需要来修改。(Use Python to climb the list of Chinese University Rankings)
爬取微信好友信息
- 利用python爬取微信好友信息，性别，地区分类等等，就还可以生成词云
爬取热门微博评论并进行数据分析、nlp情感分析
- 爬取热门微博评论并进行数据分析、nlp情感分析 xuenlp.py功能包含： 读取数据库并进行数据去重 对微博评论进行情感分析并生成统计结果 统计微博评论中的表情排行 统计微博评论中的粉丝排行前20(Crawl popular microblog comments and do data analysis and NLP sentiment analysis Xuenlp.py functions include: Read the database and de-duplicat
广州市道路数据（2018年11月）
- 利用高德地图爬取的广州道路数据，可以用gis打开(Guangzhou road data crawled by Gaode map can be opened by GIS)
高德交通态势爬取
- 爬取高德地图交通态势流量，检测路段，py代码，导入arcgis前处理使用(Traffic situation flow of climbing high Germany map)
python爬取poi城市版
- baidu地图poi爬虫软件，输入城市/地区名称，和想要查询的业态，即可爬取。(Baidu map POI crawler software)