五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

hadoop-hdfs-HA模式原理-网络文件系统

hadoop-hdfs-HA模式原理-网络文件系统

    HA 高可用:解决NameNode单点故障问题 Federation 联邦:解决NameNode压力过大的问题...

MapReduce 人个理解

MapReduce 人个理解

1.MapReduce 理解    拆分成 map 过程与 reduce 过程;    map 可以理解...

Spark—local模式环境搭建

Spark—local模式环境搭建

Spark——local模式环境搭建 一、Spark运行模式介绍 1、本地模式(loca模式):spark单机运行,一般用户测试和开发使用 2、Sta...

Spark—编译Spark源码

Spark—编译Spark源码

Spark版本:Spark-2.1.0 Hadoop版本:hadooop-2.6.0-cdh5.7.0 官方文档:http://spark.apache...

记一次sparkOnyarn错误:java.lang.UnsatisfiedLinkError

记一次sparkOnyarn错误:java.lang.UnsatisfiedLinkError

  错误大概这样: Caused by: java.util.concurrent.ExecutionException: Boxed Err...

Hadoop2.4.1入门实例:MaxTemperature

Hadoop2.4.1入门实例:MaxTemperature

版权声明:本文为博主原创文章。转载请注明来自http://blog.csdn.net/jediael_lu/ https://blog.csdn.net/j...

1.spark核心RDD特点

1.spark核心RDD特点

  RDD(Resilient Distributed Dataset) Spark源码: https://gith...

java 实现 spark Streaming

java 实现 spark Streaming

1.  创建 maven 工程   只加 spark-streaming 这个包就可以 <project...

hadoop-hdfs-完全分布式搭建

hadoop-hdfs-完全分布式搭建

       给其余三台安装JDK:    安装的历史步骤,查看自己执行过...

SSH免密码登录配置

SSH免密码登录配置

部署hadoop集群,都需要配置SSH免密码登陆,为什么要设置SSH免密码登录,其原因是我们在开启hadoop的时候需要多次输入yes和root密码,这是我...

Hive数据导入Elasticsearch

Hive数据导入Elasticsearch

一、准备jar包:可以去mvn仓库下载 elasticsearch-hadoop-6.3.1.jar 二、 进入hive添加jar hive&g...

Hadoop HDFS本地存储目录结构解析

Hadoop HDFS本地存储目录结构解析

转自:https://blog.csdn.net/superman_xxx/article/details/51689398 HDFS metadata以...

User Login