(一)flume的产生 为什么会有flume 随着互联网的发展,人们对网络日志产生的信息也越来越重视.不仅如此,我们的服务器,比如Nginx,每天都会产生大量的日志.我们要将这些日志收集到指定的地方,比如hdfs平台,进行分析.但是大量的日志产生的位置比较分散,可能来自于Tomcat.Nginx.甚至是数据库等等,而且存储的目的地也不一样,这就导致了数据采集的复杂性.然鹅最关键的问题是,如果在采集的过程中,出现问题了该怎么办?比如我们要把日志收集到hdfs平台上进行分析,我们可以通过hdfs s…