#
相信很多大数据的初学者或者想转行大数据开发的朋友最关注的问题就是大数据开发到底可以做什么。 什么是大数据？ "大数据"这个词频繁的出现在媒体是2007年之后的事了。尽管已经过去了
@[TOC] 1.Hadoop架构 Hadoop由三个模块组成：分布式存储HDFS、分布式计算MapReduce、资源调度引擎Yarn 2.HDFS体系架构 2.1NameNode NameNo
用了1天时间，才完成hive的安装配置，一：首先安装mysql下载mysql for ubuntu版本，是deb版本sudo apt-get libaiosudo apt-get libmecab2之
hadoop的官网
2019/2/16 星期六 大数据领域技术总体介绍（各个组件的作用）1、大数据技术介绍大数据技术生态体系：Hadoop 元老级分布式海量数据存储、处理技术系统，擅长离线数据分析Hbase 基于hado
重点组件：HDFS：分布式文件系统MAPREDUCE：分布式运算程序开发框架Hive：基于大数据技术（文件系统+运算框架）的SQL数据仓库工具Hbase：基于Hadoop的分布式海量数据库
流程图解析 典型的BI系统体流程如下： 由于是处理海量数据，流程中各环节所使用的技术则跟传统BI完全不同，后续课程都会一一讲解： 1) 数据采集：定制开发采集程序，或使用开源框架FLUME 2
最近发现我们的hadoop集群的客户端机器负载经常飙到几百，导致机器反应很慢， 客户反应无法提交job，或者job跑的很慢。针对这种情况通常有几个解决方案，一个是增加客户端机器数量，把他们做到一个po
1、 下载hadoop 并解压2、为 hadoop 文件分配角色 chown -R hadoop:hadoop hadoop &nbs
MapReduce&HDFS简介一、Hadoop简介: 结构化数据：表,关系型数据库//有严格的约束 半结构化数据：html,json,yaml,有元数据// 有约束，缺少严格的约束 非结构化
