五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Hive(四)Hive的3种连接方式与DbVisualizer连接Hive

Hive(四)Hive的3种连接方式与DbVisualizer连接Hive

一、CLI连接 进入到 bin 目录下,直接输入命令:  [root@node21 ~]# hive SLF4J: Class path...

zookeeper的三种安装模式

zookeeper的三种安装模式

zookeeper的安装分为三种模式:单机模式、集群模式和伪集群模式。 1、单机模式 首先,从Apache官网下载一个Zookeeper稳定版本,本次教...

Hive中导入Amazon S3中的分区表数据的操作

Hive中导入Amazon S3中的分区表数据的操作

  Hive中创建S3的外部表     数据在S3存放的数据是按时间纬度存放的,每天的数据存放在各自的目录下,目录结...

开发工具之Spark程序开发详解

开发工具之Spark程序开发详解

一  使用IDEA开发Spark程序 1、打开IDEA的官网地址,地址如下:http://www.jetbrains.com/idea/ &n...

hadoop 提交程序并监控运行

hadoop 提交程序并监控运行

程序编写及打包 使用maven导入第三方jar pom.xml <?xml version="1.0" encoding="UTF-8"?&g...

hadoop docker集群搭建

hadoop docker集群搭建

获取镜像 #本机内 docker pull ubuntu:16.04 编排镜像 启动一个容器 #本机内 docker run -i -t --n...

CDH升级 5.7.5 --> 5.13.3(tar包方式)

CDH升级 5.7.5 --> 5.13.3(tar包方式)

博客园首发,转载请注明出处:https://www.cnblogs.com/tzxxh/p/9123231.html  一、准备 1、关闭cd...

hadoop排序 -- 全排序

hadoop排序 -- 全排序

目录       一、关于Reducer全排序   1.1、  什么叫全排序   1.2、  分区的标准是什么 二、全排序的三种方式   2.1、...

【若泽大数据实战第二天】Linux命令基础

【若泽大数据实战第二天】Linux命令基础

Linux基本命令: 查看IP: ifconfig 或者 hostname -i(需要配置文件之后才可以使用) ipconfig(Windows)...

Linux基础(05)、Linux进阶命令

Linux基础(05)、Linux进阶命令

目录 一、进阶命令 二、系统命令 三、压缩和归档   3.1、归档   3.2、压缩   3.3、归档并压缩   归档、接档...

了解MapReduce_2

了解MapReduce_2

再写MapReduce执行流程之前,首先先对MapReduce有一些了解: 1. 简介  MapReduce是一个计算框架,既然是做计算的框架,那么表现的...

Hadoop分布式集群搭建_1

Hadoop分布式集群搭建_1

Hadoop是一个开源的分布式系统框架 一.集群准备     1. 三台虚拟机,操作系统Centos7,三台主机名分别为k...

User Login