#

flume

  • Flume环境部署

    文档位置: http://flume.apache.org/FlumeUserGuide.html#system-requirements Java Runtime Environment - Ja

    作者:xiao酒窝
    2020-07-13 10:37:34
  • 日志实时分析架构

    在上家公司工作时,设计的日志收集与实时分析架构,还是比较简单的:flume-ng + rocketmq + storm + redis + 前端展示消息队列部分,我们刚开始采用的是kafka,但&nb

    作者:workming
    2020-07-12 19:36:41
  • flume package遇到的问题

    flume打包遇到的一些问题1.ipc兼容性问题,线上使用2.3.0的hdfs,但是打包时默认为1.2.1的08 Apr 2015 19:38:25,122 W

    作者:菜菜光
    2020-07-12 15:56:04
  • 高可用flume-ng搭建

    一、概述1.通过搭建高可用flume来实现对数据的收集并存储到hdfs上,架构图如下:二、配置Agent1.cat flume-client.properties#name the 

    作者:一语成谶灬
    2020-07-11 06:10:34
  • flume抽取mysql数据到kafka

    kafka+zookeeper搭建见文章教程url flume安装:1、下载地址2、安装-下图 新建数据库和表3、配置新增conf/mysql-flume.conf [root@node191 ap

    作者:leizhu900516
    2020-07-08 16:27:45
  • Flume+Kafka整合

    Flume+Kafka整合  一、准备工作准备5台内网服务器创建Zookeeper和Kafka集群服务器地址:192.168.2.240192.168.2.241192.168.2

    作者:四京
    2020-07-07 23:07:20
  • Flume架构及使用例子

    Flume架构及核心组件 (1)Source 收集 负责从什么地方采集数据 (2)Channel 记录 (3)Sink 输出 官方文档 http://flume.apache.org/FlumeUs

    作者:xiao酒窝
    2020-07-03 23:15:09
  • 数据集成:Flume和Sqoop

    Flume和Sqoop是Hadoop数据集成和收集系统,两者的定位不一样,下面根据个人的经验与理解和大家做一个介绍:Flume由cloudera开发出来,有两大产品:Flume-og和Flume-ng

    作者:caosheng03
    2020-07-01 18:22:05
  • 数据采集工具的安装和使用

       数据采集是大数据分析全流程的重要环节,典型的数据采集工具包括ETL工具、日志采集工具、数据迁移工具等。   Flume是一个高可用的、高可靠的、分布式的海量日志采集、聚合和传输的系统。1.安装F

    作者:sky9890
    2020-06-28 11:31:20
  • 好程序员大数据学习路线之Logstach与flume对比

    好程序员大数据学习路线之Logstach与flume对比,没有集群的概念,logstach与flume都称为组logstash是用JRuby语言开发的组件的对比:  logstach : input

    作者:wx5d42865f47214
    2020-06-26 07:34:44