小翔博客
 首页    Hadoop 
五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

7年前 (2018-12-26) 215225人围观 抢沙发

说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

7年前 (2019-03-13) 32347人围观 抢沙发

背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

7年前 (2019-02-02) 29151人围观 抢沙发

本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

6年前 (2019-04-07) 28118人围观 抢沙发

摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

7年前 (2019-01-31) 34721人围观 抢沙发

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

6年前 (2019-04-18) 31388人围观 抢沙发

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

6年前 (2019-05-23) 30095人围观 抢沙发

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

6年前 (2020-01-23) 30307人围观 抢沙发

1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

6年前 (2020-01-26) 29176人围观 抢沙发

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Elasticsearch与Hadoop集成大数据处理介绍

Elasticsearch与Hadoop集成大数据处理介绍

7年前 (2018-12-22) 1184人围观 抢沙发

传统大数据处理 现代数据架构 Hadoop在20业务场景的应用 DataLake A data lake is a syst...

Call to localhost/127.0.0.1:9000 failed on connection exception:java.net.ConnectException的解决方案

Call to localhost/127.0.0.1:9000 failed on connection exception:java.net.ConnectException的解决方案

7年前 (2018-12-20) 2245人围观 抢沙发

Call to localhost/127.0.0.1:9000 failed on connection exception:java.net.Conne...

记一次Apache Carbondata PR的经历

记一次Apache Carbondata PR的经历

7年前 (2018-12-17) 1357人围观 抢沙发

 前言         前段时间有幸接触到Apache Carbondata，试用过程中发现了一个小小的...

HDFS命令实现分析

HDFS命令实现分析

7年前 (2018-12-16) 2233人围观 抢沙发

HDFS命令概述 HDFS命令涉及两类，一类是hadoop命令，一类是hdfs命令，功能也分为两类，第一类是HDFS文件操作命令，第二类是HDFS管理命令...

Hadoop(18)-MapReduce框架原理-WritableComparable排序和GroupingComparator分组

Hadoop(18)-MapReduce框架原理-WritableComparable排序和GroupingComparator分组

7年前 (2018-12-12) 2088人围观 抢沙发

1.排序概述 2.排序分类   3.WritableComparable案例 这个文件,是大数据-Hadoop生态(12)-H...

hadoop在CentOS下的安装配置

hadoop在CentOS下的安装配置

7年前 (2018-12-12) 1505人围观 抢沙发

  版本：CentOS-6.8-x86_64-minimal，hadoop2.6.4，jdk1.7.0 首先把jdk、hadoop压缩...

Hadoop(16)-MapReduce框架原理-自定义FileInputFormat

Hadoop(16)-MapReduce框架原理-自定义FileInputFormat

7年前 (2018-12-11) 1298人围观 抢沙发

  1. 需求 将多个小文件合并成一个SequenceFile文件（SequenceFile文件是Hadoop用来存储二进制形式的ke...

Hadoop系列006-HDFS概念及命令行操作

Hadoop系列006-HDFS概念及命令行操作

7年前 (2018-12-10) 999人围观 抢沙发

本人微信公众号，欢迎扫码关注！ HDFS概念及命令行操作 一、HDFS概念 1.1 概念 HDFS，它是一个文件系统，用于存储文件，通...

大数据系列博客之 --- 深入简出 Shell 脚本语言（高级篇）

大数据系列博客之 --- 深入简出 Shell 脚本语言（高级篇）

7年前 (2018-11-06) 1992人围观 抢沙发

  首先声明，此系列shell系列博客分为四篇发布，分别是： 　　基础篇：https://www.cnblogs.com/lsy131479/...

大数据系列博客之 --- 深入简出 Shell 脚本语言（提升篇）

大数据系列博客之 --- 深入简出 Shell 脚本语言（提升篇）

7年前 (2018-11-06) 1631人围观 抢沙发

  首先声明，此系列shell系列博客分为四篇发布，分别是： 　　基础篇：https://www.cnblogs.com/lsy131479/...

大数据系列博客之 --- 深入简出 Shell 脚本语言（基础篇）

大数据系列博客之 --- 深入简出 Shell 脚本语言（基础篇）

7年前 (2018-11-06) 1786人围观 抢沙发

  首先声明，此系列shell系列博客分为四篇发布，分别是： 　　基础篇：https://www.cnblogs.com/lsy131479/...

Hadoop大数据部署

Hadoop大数据部署

7年前 (2018-11-02) 1496人围观 抢沙发

Hadoop大数据部署 一. 系统环境配置： 1. 关闭防火墙，selinux 关闭防火墙： systemctl stop firewalld sy...

User Login