hadoop下基于dfs的文件上传，下载，删除功能，以及mapreduce分布式计算解析实例 -hadoop based dfs file upload, download and delete functions, as well as mapreduce distributed computing parse instance

Hadoop HDFS文件系统操作例程。功能包括：获取HDFS指定目录下所有文件列表,打印输出 递归遍历目录 上传本地文件到HDFS 在HDFS上Hadoop HDFS文件系统例程。功能包括：创建文件夹 创建HDFS文件 读取HDFS文件内容 重命名HDFS文件 删除HDFS文件及目录 查看HDFS文件是否存在 获取HDFS中指定目录中的文件列表. -Hadoop HDFS file system operations routine. Features include: HDFS to get

Kafka是一个高吞吐量分布式消息系统。linkedin开源的kafka。 Kafka就跟这个名字一样，设计非常独特。首先，kafka的开发者们认为不需要在内存里缓存什么数据，操作系统的文件缓存已经足够完善和强大，只要你不搞随机写，顺序读写的性能是非常高效的。kafka的数据只会顺序append，数据的删除策略是累积到一定程度或者超过一定时间再删除。Kafka另一个独特的地方是将消费者信息保存在客户端而不是MQ服务器，这样服务器就不用记录消息的投递过程，每个客户端都自己知道自己下一次应该从什么地