#

hadoop

  • java写hdfs程序

    1、hadoop默认临时数据文件是存储于Unix的tmp目录下(cd /tmp 包含hadoop-root等文件),如果不进行修改,linux系统重启后hadoop有可能出现不正常现象;故需要修改ha

    作者:zjy1002261870
    2020-07-24 23:19:04
  • Hadoop项目规划:硬件

    规划硬件我们主要介绍两个方面:一个是Master怎么规划,一个是Slave怎么规划,选择是不一样的。其他规划诸如容量以及操作系统的选择也会简单介绍,对于了解Hadoop的操作环境有着重要帮助作用。首先

    作者:caosheng03
    2020-07-24 22:49:13
  • zookeeper客户端功能体验

    ZooKeeper(一)之为什么要使用ZooKeeper:https://blog.csdn.net/qq_39468795/article/details/78394253zookeeper命令行客

    作者:马吉辉
    2020-07-24 20:29:21
  • 利用Hadoop提供的RPC API实现简单的RPC程序

    [toc] 利用Hadoop提供的RPC API实现简单的RPC程序 在Hadoop中提供了RPC服务的使用API,通过其API地使用,可以非常简单地构建远程过程调用程序,下面就给出一个简单的实例。

    作者:xpleaf
    2020-07-24 18:30:23
  • ansible编写hadoop群集

    Ansible实战:部署分布式日志系统本节内容:背景分布式日志系统架构图创建和使用rolesJDK 7 roleJDK 8 roleZookeeper roleKafka roleElasticsea

    作者:拎壶冲冲冲
    2020-07-24 13:27:12
  • Hadoop运维记录系列(二十三)

    最近做集群机房迁移,在旧机房和新机房之间接了根专线,做集群不停机搬迁,也就是跨机房,同时要新加百多台服务器,遇到几个问题,记录一下。旧集群的机器是centos 6, 新机房加的机器是centos 7。

    作者:Slaytanic
    2020-07-24 11:29:01
  • 0005-Windows Kerberos客户端配置并访问CDH

    温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.概述 本文档描述Windows Server2008 R2(windows的内核版本是6.1,与windows 7相同)下安装K

    作者:Hadoop实操
    2020-07-24 11:22:10
  • 新手必备:Hadoop基础——YARN认知

    Yarn是一个分布式的资源管理系统,用以提高分布式的集群环境下的资源利用率,这些资源包括内存、IO、网络、磁盘等。其产生的原因是为了解决原MapReduce框架的不足。 最初MapReduce的com

    作者:Hjiangxue
    2020-07-24 10:51:05
  • spark-sql case when 问题

    SELECT CASE (pmod(datediff(f0.`4168388__c_0`,'1970-01-04'),7)+1)  WHEN '1' THEN '星期日' WHEN '2'

    作者:去买大白兔
    2020-07-24 10:29:36
  • MapReduce架构简介

    前言: MapReduce是用于数据处理的一种编程模型,简单但足够强大,专门为并行处理大数据而设计。MapReduce的处理过程分为两个步骤:map和reduce。每个阶段的输入输出都是key-va

    作者:wangkunj
    2020-07-24 10:04:29