五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Hbase 教程-安装

Hbase 教程-安装

HBase安装 安装前设置 安装Hadoop在Linux环境下之前,需要建立和使用Linux SSH(安全Shell)。按照下面设立Linux环境提供的...

深入浅出“跨视图粒度计算”--3、EXCLUDE表达式

深入浅出“跨视图粒度计算”--3、EXCLUDE表达式

本文由  网易云 发布。   深入嵌入“跨视图粒度计算”的前面两篇分别讲了 1、理解数据的粒度 2、INCLUDE表达式 这一...

elasticsearch logstash jdbc 配置 增量更新

elasticsearch logstash jdbc 配置 增量更新

  环境前提: centos 6.5 x64 jdk 1.8 elasticsearch 6.1.4 logstash 6....

[HBase Manual] CH2 Getting Started

[HBase Manual] CH2 Getting Started

Getting Started Getting Started. 1 1. Introduction. 1 2.Quick Start-Stranda...

什么是Azkaban?

什么是Azkaban?

Azkaban是什么       Azkaban是由Linkedin开源的做批量工作流任务的调度器。在一个工作流内按照特定的...

Hadoop学习笔记05_HA

Hadoop学习笔记05_HA

################# HA 即 High Available 高可用。# 其作用是为了减少主从结构的单点故障,而设置备用节点,既然学习了Had...

Hadoop学习笔记04_Hbase

Hadoop学习笔记04_Hbase

大数据开发的学习,组件还是很多的,都需要掌握并多加练习。 最好的参考文档当然是官方的了。 因为Hadoop生态圈组件很多,所以,在建设之初一定要检查好各版...

CacheManager源码分析

CacheManager源码分析

计算rdd的某个分区是从RDD的iterator()方法开始的,我们从这个方法进入 然后我们进入getOrCompute()方法中看看是如何进行读取数...

window下 mongodb快速安装

window下 mongodb快速安装

  下载地址 https://www.mongodb.org/dl/win32/x86_64-2008plus-ssl  ...

[HDFS Manual] CH8 HDFS Snapshots

[HDFS Manual] CH8 HDFS Snapshots

HDFS Snapshots HDFS Snapshots. 1 1. 概述... 1 1.1 Snapshottable目录... 1 1.2 快...

greenplum集群某台机器磁盘占用100%处理方式

greenplum集群某台机器磁盘占用100%处理方式

一、问题描述 使用gpfdist往集群中导入大量数据, 一段时间后连接退出,集群无法连接  二、问题定位 使用如下命令查看: gpsta...

阿里云MaxCompute被Forrester评为全球云端数据仓库领导者

阿里云MaxCompute被Forrester评为全球云端数据仓库领导者

参考消息网3月19日报道 日前,全球权威调研机构佛瑞斯特研究公司(Forrester)发布《2018年一季度云端数据仓库》报告。报告对大数据服务商的主要功能...

User Login