小翔博客
 首页    Hadoop 
五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

7年前 (2018-12-26) 215223人围观 抢沙发

说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

7年前 (2019-03-13) 32347人围观 抢沙发

背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

7年前 (2019-02-02) 29151人围观 抢沙发

本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

6年前 (2019-04-07) 28118人围观 抢沙发

摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

7年前 (2019-01-31) 34721人围观 抢沙发

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

6年前 (2019-04-18) 31388人围观 抢沙发

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

6年前 (2019-05-23) 30095人围观 抢沙发

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

6年前 (2020-01-23) 30307人围观 抢沙发

1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

6年前 (2020-01-26) 29176人围观 抢沙发

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

hadoop镜像文件和编辑日志文件

hadoop镜像文件和编辑日志文件

6年前 (2019-05-15) 1947人围观 抢沙发

镜像文件和编辑日志文件 1）概念 　　namenode被格式化之后，将在/opt/module/hadoop-2.7.2/data/tmp/dfs/na...

大数据学习之hadoop的优化16

大数据学习之hadoop的优化16

6年前 (2019-05-15) 1765人围观 抢沙发

hadoop优化 1）mr程序的效率瓶颈 功能：分布式离线计算    ->计算机性能 CPU、内存、磁盘、网络 &nb...

Hadoop完全分布式环境下，DataNode进程正常启动，但是网页上不显示DataNode节点

Hadoop完全分布式环境下，DataNode进程正常启动，但是网页上不显示DataNode节点

6年前 (2019-05-15) 1697人围观 抢沙发

Hadoop完全分布式环境下，上传文件到hdfs上时报错： 19/05/15 11:03:12 WARN hdfs.DFSClient: DataSt...

CentOS7安装CDH 第七章：CDH集群Hadoop的HA配置

CentOS7安装CDH 第七章：CDH集群Hadoop的HA配置

6年前 (2019-05-15) 2080人围观 抢沙发

相关文章链接 CentOS7安装CDH 第一章：CentOS7系统安装 CentOS7安装CDH 第二章：CentOS7各个软件安装和启动 CentO...

Spark-sql windows 下 执行错误.

Spark-sql windows 下 执行错误.

6年前 (2019-05-15) 1847人围观 抢沙发

root scratch dir: /tmp/hive on HDFS should be writable 查询后，下面这个博客的解决方案成功解决了我...

flume-----发送 sink 2种本地和hdfs

flume-----发送 sink 2种本地和hdfs

6年前 (2019-05-15) 1957人围观 抢沙发

[root@linux05 conf]# vim hdfssink.conf //从缓存拿出来   直接到hdfs 中 ...

shell中的fg 命令

shell中的fg 命令

6年前 (2019-05-15) 1743人围观 抢沙发

fg(前台执行) frontground bg(后台执行) background & daemon 总结： 一般命令在前台执行（fg），...

CDH预警配置QQ邮箱

CDH预警配置QQ邮箱

6年前 (2019-05-15) 866人围观 抢沙发

一、 在QQ邮箱中开启POP   二 、关闭主机的sendmail,开启postfix (本机若没有两个服务,就需要先安装)本地安装send...

RDD算子的使用

RDD算子的使用

6年前 (2019-05-15) 1426人围观 抢沙发

TransformationDemo.scala import org.apache.spark.{HashPartitioner, SparkConf...

sparkSQL中的example学习(3)

sparkSQL中的example学习(3)

6年前 (2019-05-15) 2180人围观 抢沙发

UserDefinedTypedAggregation.scala(用户可自定义类型) import org.apache.spark.sql.expr...

sparkSQL中的example学习(1)

sparkSQL中的example学习(1)

6年前 (2019-05-15) 921人围观 抢沙发

SparkSQLDemo.scala import org.apache.spark.sql.{Row, SparkSession} import or...

sparkSQL中的example学习(2)

sparkSQL中的example学习(2)

6年前 (2019-05-15) 2143人围观 抢沙发

UserDefinedUntypedAggregate.scala(默认返回类型为空,不能更改) import org.apache.spark.sql...

User Login