小翔博客
 首页    Hadoop 
五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

7年前 (2018-12-26) 215225人围观 抢沙发

说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

7年前 (2019-03-13) 32347人围观 抢沙发

背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

7年前 (2019-02-02) 29151人围观 抢沙发

本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

6年前 (2019-04-07) 28118人围观 抢沙发

摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

7年前 (2019-01-31) 34721人围观 抢沙发

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

6年前 (2019-04-18) 31388人围观 抢沙发

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

6年前 (2019-05-23) 30095人围观 抢沙发

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

6年前 (2020-01-23) 30307人围观 抢沙发

1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

6年前 (2020-01-26) 29176人围观 抢沙发

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

elk6.3 centos集群搭建 head插件安装

elk6.3 centos集群搭建 head插件安装

7年前 (2018-07-27) 2041人围观 抢沙发

版本elk均为6.3+centos7.0 准备工作 官网下载elk6.3的linux环境的压缩包，sftp上传 下载对应的head插件sftp上...

Spark计算模型RDD

Spark计算模型RDD

7年前 (2018-07-26) 1277人围观 抢沙发

RDD弹性分布式数据集 RDD概述 　　RDD（Resilient Distributed Dataset）叫做弹性分布式数据集，是Spark中最基本的...

HIVE中的数据怎么导出到hdfs或本地呢

HIVE中的数据怎么导出到hdfs或本地呢

7年前 (2018-07-25) 987人围观 抢沙发

思路一：重定向 在我不知道工具 ，也不熟悉HIQL语法的情况下，没办法了，只有选择一个最简单粗暴的方法，重定向。 在shell中使用 hive -e 可...

我的名字叫hadoop

我的名字叫hadoop

7年前 (2018-07-20) 771人围观 抢沙发

  　　 第一回 新入环境 　　我的名字是hadoop，我一出生我的爸爸雅虎就给我取了这样一个名字：hadoop，我也不知道为什么叫这...

hadoop jobhistory访问界面长时间打不开

hadoop jobhistory访问界面长时间打不开

7年前 (2018-07-20) 1416人围观 抢沙发

1.浏览器无法直接通过url访问 可能原因 ：主机名未配置，因此无法识别，在 c:\windows\system32\drivers\etc 目录添加主机...

关于org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z报错

关于org.apache.hadoop.io.nativeio.NativeIO$Windows.access0(Ljava/lang/String;I)Z报错

7年前 (2018-07-18) 1978人围观 抢沙发

之前一直出现这个错误，使用的开发工具是IDEA 我感觉似乎是hadoop与windows的操作系统不太适合 于是在project创建 or...

hadoop 部署配置

hadoop 部署配置

7年前 (2018-07-17) 745人围观 抢沙发

配置hadoop： 第一个：hadoop-env.sh export JAVA_HOME=/usr/java/jdk1.7.0_65 选择修改日志文...

Spark新手入门——2.Hadoop集群(伪分布模式)安装

Spark新手入门——2.Hadoop集群(伪分布模式)安装

7年前 (2018-07-15) 1152人围观 抢沙发

主要包括以下三部分，本文为第二部分： 一. Scala环境准备 查看 二. Hadoop集群(伪分布模式)安装 三. Spark集群(standalone模...

Linux修改hostname与免密码登录

Linux修改hostname与免密码登录

7年前 (2018-07-15) 1108人围观 抢沙发

修改hostname [root@centos7 ~]$ hostnamectl set-hostname hadoop001 # 使用这个命令会立即生...

Linux 安装Zookeeper<准备>(使用Mac远程访问)

Linux 安装Zookeeper<准备>(使用Mac远程访问)

7年前 (2018-07-14) 1872人围观 抢沙发

阅读本文需要安装JDK 一 Zookeeper简介 zookeeper是用java语言编写的一款为分布式应用所设计的协调服务 zookeeper是apa...

第8章 ZooKeeper操作

第8章 ZooKeeper操作

7年前 (2018-07-10) 1663人围观 抢沙发

目录 8.1 集群环境搭建 1.上传ZooKeeper安装文件 2.编写配置文件 3.拷贝ZooKeeper安装信...

第7章 YARN HA配置

第7章 YARN HA配置

7年前 (2018-07-10) 1309人围观 抢沙发

目录 7.1 yarn-site.xm文件配置 7.2 测试YARN自动故障转移 ResourceManager (RM)负责跟踪集...

User Login