五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

linux_day1 (腾老师)2019年3月25日18:11:43(CentOs)

linux_day1 (腾老师)2019年3月25日18:11:43(CentOs)

 linux(CentOs) { Ubuntu :换一个Ubuntu的镜像就行,   进入终端快捷键  &nbs...

HDFS读写流程learning

HDFS读写流程learning

有许多对流程进行描述的博客,但是感觉还是应当学习一遍代码,不然总感觉怪怪的,https://blog.csdn.net/popsuper1982/artic...

HDFS中将普通用户增加到超级用户组supergroup

HDFS中将普通用户增加到超级用户组supergroup

  图1为flume agent日志报错,图2为使用root用户列出...

ZooKeeper 单机版安装和配置

ZooKeeper 单机版安装和配置

Zookeeper 下载链接:http://mirrors.shu.edu.cn/apache/zookeeper/   #wget http...

Hadoop如何将TB级大文件的上传性能优化上百倍?

Hadoop如何将TB级大文件的上传性能优化上百倍?

  这篇文章,我们来看看,Hadoop的HDFS分布式文件系统的文件上传的性能优化。   首先,我们还是通过一张图来回顾一下文件上传的大概的原理。   ...

Flume1.6+Kafka

Flume1.6+Kafka

需求:   使用Flume读取Linux的文本文件,将文本文件中的数据发送到kafka 前置条件:   安装好zk集群,安装好kafka集群 &nb...

配置全分布式

配置全分布式

注意 :先把原来伪分布式的解压包都删掉 然后重新解压tar包 重新删掉.ssh  秘钥文件 重新生成文件 配置免密 cd ~  》...

消息队列与Kafka

消息队列与Kafka

2019-04-09 关键词: 消息队列、为什么使用消息队列、消息队列的好处、消息队列的意义、Kafka是什么 本篇文章系本人就当前所...

SSH免密码登录Linux

SSH免密码登录Linux

如果两台linux之间交互频繁,但是每次交互如果都需要输入密码,就会很麻烦,通过配置SSH就可以解决这一问题 下面就说下配置流程(下面流程在不同机器上全部...

Hadoop完全分布式环境搭建

Hadoop完全分布式环境搭建

前言 本文搭建了一个由三节点(master、slave1、slave2)构成的Hadoop完全分布式集群,集群三个节点基于三台虚拟机进行搭建,节点安装的操...

常用的Linux命令操作

常用的Linux命令操作

1、日常操作命令 **查看当前所在的工作目录pwd **查看当前系统的时间 date **查看有谁在线(哪些人登陆到了服务器)who 查看当前在线la...

Hadoop环境搭建--Docker完全分布式部署Hadoop环境

Hadoop环境搭建--Docker完全分布式部署Hadoop环境

系统版本:centos 本文介绍如何从0利用Docker搭建Hadoop环境,制作的镜像文件已经分享,也可以直接使用制作好的镜像文件。 一、准备工作...

User Login