相信大家对Hadoop、spark这些都不陌生，这些作为大数据的核心模块，接触的是最多的。而今天我们就来了解一下Flume。
　　Flume是一个分布式、可靠、和高可用的海量日志采集、聚合和传输的系统，Flume可以采集文件，将采集好的文件输出到HDFS、hbase、hive、kafka等众多外部存储系统中。
　　下面我们就来具体的了解一下Flume：
　　1、Flume的架构
　　Flume是有source、channel、sink组成，传输过程：日志源sourcechannelsinkHDFS
　　Source：：采集源，用于跟数据源对接，以获取数据；
　　Sink：：下沉地，采集数据的传送目的，用于往下一级agent传递数据或者往最终存储系统传递数据；
　　Channel：angent内部的数据传输通道，用于从source将数据传递到sink。
　　2、Flume多个agent串联
　　3、agent的配置文件
　　A。需要定义agent的名字，还需要定义source，channel，sink（名字，有几个）
　　B。需要对source，channel，sink指明具体的类型和配置
　　C。需要指明source，channel，sink三者之间的一个关系
　　注意：一个sink只能对应一个channel，一个channel可以对应多个sink
　　以上就是对Flume的介绍了，希望对大家能有所帮助，如果想了解更多详情，请点击成都加米谷大数据官网吧！

苹果手机都有什么比较厉害的app？推荐6个iPhone上超级出色的APP，用完直呼相见恨晚！1、时光纪推荐理由：时间管理工具，iOS限免APP作为一款纪念美好日子的APP，这款时光纪真的是满足了我所……快速学习Javascript有哪些思维技巧Javascript在过去几年时间，这种原本用于web浏览器的脚本语言，现阶段越来越多的出现在更广泛的软件应用当中，不仅可以用在服务器端代码，还可运行ios与android应用……骨传导助听器和普通助听器有什么不同？你好，一个是气传播一个是固体传播听到声音的快慢与声效不同相同点：都是通过一定的媒介将振动传递给内耳造成听觉。不同点：空气传到路径为骨膜、听小骨、内耳，而骨传导路径则是为颌骨直接……Java零基础入门（1）计算机程序和Java概述引言软件是用程序设计语言开发出来的，而程序设计语言有这么多种，为什么我们会选择Java？原因就是Java能够让用户开发和部署可用于Internet上的服务器、台式电脑和小……苹果13肯定不会送，有钱就官方买，想省钱就选奥睿科快充套装从iPhone12开始，苹果公司就已经取消赠送充电头。即将发布的iPhone13肯定不会再送，那如果你想体验，iPhone落后的20W慢充，只能选择从官方购买慢充充套装（20W……华为有哪些高科技技术？华为啥也不是，只有20万人，8万研发人员，2万博士，还有倔老头，一部基本法，几万亩花园厂区，十几个世界各地的研究所而已华为没有什么高科技，如果说有的话，那就是被美国举全国……科技强国必须从高考开始改革，大力提高数理化的分值从现在世界各国的发展来看，除了靠科技强国，好像也没有更好的途径了。所以我们国家要想真正强大，在世界竞争中立于不败之地，就必须大力发展科技。但要想靠科技强国就必须改革现在的高考制……不到2小时充满56万mAh，是什么让EcoFlow的户外电源近几年伴随着用户出行用电需求变多，以及在室内储电意识的增加，国内户外电源的发展进入了快车道，各大厂商纷纷入局，推出了多款户外电源产品。不过前一段时间户外电源领域出现了一匹……假如激光雷达欺骗了你未来的某一天，自动驾驶已经普及，大街上跑着各种各样的自动驾驶汽车，人们在车里睡觉。突然，一辆车上搭载的激光雷达错误接收了本不属于它的信号，进而产生了一系列误判，一瞬间道路……手机口碑榜前十名华为Mate40无缘，荣耀手机登顶进入5G时代之后，手机厂商开始感到危机感，深怕和当年2G、4G时代一样，被突如其来的5G洗牌，诺基亚、HTC就是前车之鉴。因此，我们看到小米和OV等品牌，不断发布新款5G手机，……预算10002000元内有什么手机值得买？hello，大家好，我是山外。2021年已经过去一半了，是时候进行上半年中手机盘点了，可能有很多朋友也需要更换手机了。那么预算10002000元内，有什么手机值得我们购买……普源精电致力成为全球领先的测试和测量仪器及解决方案的提供商中证网讯（王珞）普源精电作为行业内具有电子测量仪器芯片自主研发能力的高新技术企业，公司专注于通用电子测量仪器领域的前沿技术开发与突破，以通用电子测量仪器的研发、生产和销售为主要……