Ubuntu下使用Spark Streaming处理来自FlumeNG的流数据基本方法
江海志 9年前 (2015-11-17) 5748浏览 0评论
SparkStreaming是一个对实时数据流进行高通量、容错处理的流式处理系统,可以对多种数据源(如Kdfka、Flume、Twitter、Zero和TCP 套接字)进行类似map、reduce、join、window等复杂操作,并将结果保存到外部文件系统、数据库或应用到实时仪表盘。 Spark Streaming流式处理系统特点有: 将流式计算分解成一系列...