#
什么是大数据？进入本世纪以来，尤其是2010年之后，随着互联网特别是移动互联网的发展，数据的增长呈爆炸趋势，已经很难估计全世界的电子设备中存储的数据到底有多少，描述数据系统的数据量的计量单位从MB（1
由于现在linux多用64bit，但是无奈haoop.apche官网只提供了32编译的hadoop2.5.2，只好自己编译。 &nbs
&nbs
1、启动yarn时报Error: JAVA_HOME is not set and could not be found.修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME，
最近不少网友向我咨询如何学习大数据技术？大数据怎么入门？怎么做大数据分析？数据科学需要学习那些技术？大数据的应用前景等等问题。由于大数据技术涉及内容太庞杂，大数据应用领域广泛，而且各领域和方向采用的关
前言： hadoop：存储和处理平台 hdfs：集群，NN，SNN，DN //SNN:将HDFS的日志和映像进行合并操作 mapreduce: 集群，有中心node，jobTracker/Task
一、介绍 HDFS （Hadoop Distributed File System）是 Hadoop 下的分布式文件系统，具有高容错、高吞吐量等特性，可以部署在低成本的硬件上。 二、HDFS 设计原理
下载地址：http://archive.cloudera.com/cdh6/cdh/5/你想下载得tgz包示例：http://archive.cloudera.com/cdh6/cdh/5/hadoo
1.选取三台服务器（CentOS系统64位） 114.55.246.88 主节点 114.55.246.77 从节点 114.55.246.93 从节点
经常管理和监控，需要进行shell编程，直接对进程kill或者重启操作。我们需要进行快速定位到每个进程的pid号pid默认存储在/tmp目录 pid内容为进程号 ps -ef|grep hadoop
