#

hadoop

  • Yarn资源调度系统的架构和原理

    本篇文章为大家探讨Yarn资源调度系统的架构和原理的解决方法,文章内容质量较高,有需要的朋友可以学习和借鉴。1、Yarn介绍   Apache H

    作者:Leah
    2020-06-12 09:38:15
  • spack安装使用

    前提:JDK1.8,无密互通,zookeeper,hadoop使用服务器列表 master slave1 slave2 192.168.3.58 192.168.3.54 192.168

    作者:yr_linux运维
    2020-06-12 07:48:28
  • hadoop2安装脚本

    #!/bin/bash## Install Hadoop 2 using pdsh/pdcp where possible.# # Command can be interactive or file

    作者:洪林
    2020-06-11 19:50:54
  • 安装Hadoop2.7.3

    1.解压并移动到相应目录,我习惯将软件放到/opt目录下,命令如下:    tar -zxvf hadoop-2.7.3.tar.gz  &

    作者:迟连成
    2020-06-11 14:31:39
  • HDFS学习小结(Hadoop2.xx版本)v1.2

    hadoop2.xx 集群搭建:http://bigtrash.blog.51cto.com/8966424/18304231.HDFS(Hadoop Distributed File System)

    作者:退而结网ZP
    2020-06-11 13:51:22
  • 在Hive中如何实现数据分区

                       Hive中的分区就是分目录,把一个大的数据

    作者:caosheng03
    2020-06-11 12:06:27
  • hadoop1.x   MapReduce工作原理

    MapReduce 如何解决负载均衡和数据倾斜:阶段主要出在Map作业结束后,shuffer(洗牌)过程中,如何将map处理后的结果分成多少份,交由Reduce作业,使得每部分reduce作业尽可能均

    作者:colapanda
    2020-06-11 04:26:14
  • hadoop的指标类型和日志

    Hadoop概念Hadoop是一个能够对大量数据进行分布式处理的软件框架。 Hadoop 以一种可靠、高效、可伸缩的方式进行数据处理 。Hadoop 是可靠的,因为它假设计算元素和存储会失败,因此它维

    作者:元一
    2020-06-10 17:09:10
  • hadoop生态圈的详解

    学习和使用hadoop有一年了,这里主要分享一下对hadoop整体上的理解,分门别类的介绍一下相关组件,最后提供了建议的学习路线,希望对hadoop的初学者有参考作用。 1. &n

    作者:cpaqyx
    2020-06-10 03:55:47
  • 配置datanode主机名slaves

    1.配置hadoop的datanode主机名,可以是ip地址,配置内容如下node3 node4 node5

    作者:素颜猪
    2020-06-09 21:05:24