最早是Cloudera提供的日志收集系统，目前是Apache

flume:日志收集系统 Zookeeper:ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。 Storm:Storm是Twitter开源的分布式实时大数据处理框架，被业界称为实时版Hadoop。 Speak streaming:Spark Streaming 是 Spark 核心 API 的一个扩展，可以实现高吞吐量的、具备容错机制的实时流数据的处理。