#

doop

  • Hadoop -2.7.2包64位编译教程

    网上很多教程关于Hadoop-2.4包64位编码的教程,最新版2.7.2几乎相同,在此为大家复述一下。分享两个比较权威的附上链接: Ubuntu用户推荐参考: http://www.abou

    作者:权小飞
    2020-07-21 06:08:53
  • 十二、hadoop的序列化

    一、序列化基本概述 1、何为序列化 序列化就是将内存中的对象,转换成字节序列(或者按照其他数据传输协议转换),以便于持久化存储到磁盘中以及网络传输 2、为什么需要序列化 一般情况下,对象只存储在本地的

    作者:隔壁小白
    2020-07-20 15:51:28
  • 【总结】Hadoop中的MultipleOutputs实践

    本例子采用hadoop1.1.2版本,附件中有例子的数据文件采用气象数据作为处理数据1、MultipleOutputs例子,具体解释在代码中有注释package StationPatitio

    作者:巧克力黒
    2020-07-20 09:09:13
  • HADOOP/HBase动态新增节点

    1. 检查JDK版本是否相同并拷贝JDK,并配置/etc/profile文件的JAVA_HOME和CLASSPATH属性2. 配置/etc/hosts文件,新增新加机器的计算机名,包括原有机器和新增机

    作者:谁伴我闯荡
    2020-07-20 03:49:36
  • Hadoop2.0分布式集群的平台搭建

    一、Hadoop集群安装前的准备基础环境 四台Centos6.5 IP地址: 192.168.174.128 192.168.174.129 192.168.174.130 192.168.174.1

    作者:1crazygorilla
    2020-07-19 09:56:00
  • 从ftp上传文件到hadoop的一个坑

    执行如下命令,发现报错[hdfs@cdhm1 ~]$ hadoop distcp ftp://ftp01:ftppasswd@132.110.64.186/te

    作者:知者不言
    2020-07-19 07:43:03
  • hadoop 3.0.0 安装配置

    环境描述根据需求,部署hadoop-3.0.0基础功能架构,以三节点为安装环境,操作系统CentOS 7 x64;openstack创建三台虚拟机,开始部署;IP地址 主机名10.10.204.31

    作者:冰河cloud
    2020-07-18 23:50:53
  • 十七、hadoop压缩相关

    一、数据压缩在hadoop中的意义 1、基本概述 ​ 压缩技术可以减少底层hdfs的读写字节数。并且能够降低在数据传输过程中占用的网络带宽资源,以及降低占用的磁盘空间。而在MapRedu

    作者:隔壁小白
    2020-07-18 15:05:34
  • hadoop分布式集群部署以及过程中遇到的一些坑

    在hadoop学习过程中,首先第一步是部署伪分布以及分布式集群。在集群的部署过程中http://www.powerxing.com/install-hadoop-cluster/使用这篇博客作为参考。

    作者:zfno11
    2020-07-18 09:21:08
  • Hadoop基础原理

    Hadoop基础概念作者:Xiaoyu Ma链接:https://www.zhihu.com/question/27974418/answer/38965760来源:知乎著作权归作者所有。商业转载请联

    作者:zenge_blog
    2020-07-18 03:20:38