#

hadoop

  • 使用zookeeper搭建hadoop集群(QJM)

    1:配置免密码登录使用ssh-keygen生成密钥,会在当前目录下生成一个.ssh文件夹和id_rsa私钥公钥;把公钥拷贝到同一台主机对应的.ssh目录下,然后加载进authorized_keys文件

    作者:栖木之地
    2020-07-31 22:46:19
  • hadoop + spark+ hive 集群搭建(apache版本)

    0. 引言 hadoop 集群,初学者顺利将它搭起来,肯定要经过很多的坑。经过一个星期的折腾,我总算将集群正常跑起来了,所以,想将集群搭建的过程整理记录,分享出来,让大家作一个参考。由于搭建过程比较漫

    作者:hello_cjq
    2020-07-31 21:01:03
  • yarn和hdfs

    Yarn包括resourcemanager和datamanagerHdfs包括namenode和datanode 这两个服务启动了,就可以跑mapreduce程序了

    作者:yuanchenkai
    2020-07-31 19:06:28
  • 使用Hadoop统计日志数据

    用户行为日志概述 用户行为日志: 用户每次访问网站时所有的行为数据 访问、浏览、搜索、点击... 用户行为轨迹、流量日志(用户行为日志的其他名称) 为什么要记录用户访问行为日志: 进行网站

    作者:ZeroOne01
    2020-07-31 17:08:42
  • hadoop的端口简介

    hadoop的端口:50070 //namenode http port50075 //datanode http port50090 //2namenode http port8020 //name

    作者:大数据部落
    2020-07-31 12:57:57
  • mapreduce原理

    MapReduce从它名字上来看就大致可以看出个缘由,两个动词Map和Reduce,“Map(展开)”就是将一个任务分解成为多个任务,“Reduce”就是将分解后多任务处理的结果汇总起来,得出最后的分

    作者:yuanchenkai
    2020-07-31 12:46:40
  • 菜鸟的Hadoop快速入门

    一、相关概念 1、大数据 大数据是一门概念,也是一门技术,是以Hadoop为代表的大数据平台框架上进行各种数据分析的技术。 大数据包括了以Hadoop和Spark为代表的基础大数据框架,还包括实时数据

    作者:数澜
    2020-07-31 12:43:16
  • Hadoop的入门基础有哪些

    本篇文章给大家分享的是有关Hadoop的入门基础有哪些,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。1、Hadoop概述Hadoop 是

    作者:Leah
    2020-07-31 11:24:18
  • cdh版本升级(5.14 -> 6.2)

    我们的Cloudera Manager和cdh版本是5.14,现在公司需要升级到cdh7.2需要先升级Cloudera Manager,然后升级cdh。 1.Cloudera Manager升级 (参

    作者:choulanlan
    2020-07-31 10:35:27
  • MapReduce程序之序列化原理与Writable案例

    [TOC] MapReduce程序之序列化原理与Writable案例 前言 在编写MapReduce程序时,我们会发现,对于MapReduce的输入输出数据(key-value),我们只能使用Had

    作者:xpleaf
    2020-07-31 05:54:46