#
随着数据化浪潮席卷全球，数据中台也由此应运而生。众所周知，数据中台的主要作用在于把数据进行统一标准和口径之后，再进行储存和加工，从而使企业可以提供更高效的服务。简单来讲，数据中台是以节省企业成本，实现
大数据学习路线分享Hadoop阶段的高可用配置，什么是Hadoop的HA机制 Ha机制即Hadoop的高可用（7*24小时不中断服务） 正式引入HA机制是从hadoop2.0开始，之前的版
近日，国内领先的“iPaaS+AI”一站式大数据融合服务提供商DataPipeline宣布加入Linux基金会旗下OpenMessaging开源社区，将与OpenMessaging开源社区其他成员阿
什么是流量流量是用户与网站交互产生的点击流数据的反应 是业务与用户的营销接触点，是业务红利的入口 流量数据通过用户行为反应营销漏斗过程。流量基本指标介绍数量指标(页面浏览量、访次、
Spark程序优化所需要关注的几个关键点——最主要的是数据序列化和内存优化 spark 设置相关参数问题1：reduce task数目不合适解决方法：需根据实际情况调节默认配置，调整方式是修改参数sp
[toc] MapReduce程序之combiner规约 前言 前面的wordcount程序，shuffle阶段的数据都是<hello, [1, 1, 1]>这种类型的（
本文主要是总结了工作中一些常用的操作，以及不合理的操作，在对慢查询进行优化时收集的一些有用的资料和信息，本文适合有MySQL基础的开发人员。 一、索引相关 索引基数：基数是数据列所包含的不同值的数量。
正文与事务处理应用相比，大数据服务属于分析处理应用，由于两者的数据处理特点不同，因此容量估算方法也有一定的区别。大数据服务通常要经过数据ETL、数据存储、数据分析、数据展示、数据开放的过程，因此在计算
从2012年开始，几乎人人（至少是互联网界）言必称大数据，似乎不和大数据沾点边都不好意思和别人聊天。从2016年开始，大数据系统逐步开始在企业中进入部署阶段，大数据的炒作逐渐散去，随之而来的是应用的蓬
以下是整理flume的各种采集方式 代码直接用 一、sou
