五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

新闻网大数据实时分析可视化系统项目——12、Hive与HBase集成进行数据分析

新闻网大数据实时分析可视化系统项目——12、Hive与HBase集成进行数据分析

(一)Hive 概述 (二)Hive在Hadoop生态圈中的位置 (三)Hive 架构设计 (四)Hive 的优点及应用场景 (...

新闻网大数据实时分析可视化系统项目——10、数据采集/存储/分发完整流程测试

新闻网大数据实时分析可视化系统项目——10、数据采集/存储/分发完整流程测试

(一)idea工具开发数据生成模拟程序 1.在idea开发工具中构建weblogs项目,编写数据生成模拟程序。 package main.java;...

新闻网大数据实时分析可视化系统项目——1、需求分析与架构设计

新闻网大数据实时分析可视化系统项目——1、需求分析与架构设计

业务需求分析 1)捕获用户浏览日志信息 2)实时分析前20名流量最高的新闻话题 3)实时统计当前线上已曝光的新闻话题 4)统计哪个时段用户浏览量最高...

Hadoop2.X的环境配置与运行官方案例

Hadoop2.X的环境配置与运行官方案例

一、安装之前的准备 1.1 修改主机名称 进入 Linux 系统查看本机的主机名。通过 hostname 命令查看。 [root@localhost...

HBase学习之BulkLoad

HBase学习之BulkLoad

HBase学习之BulkLoad       参考资料: 1、https://blog.csdn.net/shix...

hbase 反范式化

hbase 反范式化

总结一下, 这段原文https://blog.csdn.net/zbuger/article/details/51026791# 范式化设计目标的主要目的...

Windows下编译 Hadoop

Windows下编译 Hadoop

Windows下编译 Hadoop-2.9.2 系统环境 系统: Windows 10 10.0_x64 maven: Apache Maven 3.6...

shell脚本启动所有集群节点

shell脚本启动所有集群节点

#profile变量追加到.bashrc中 cat /etc/profile >> ~/.bashrc #start-all-cluste...

HDP3.1 中 YRAN 和 MR2 的内存大小配置的计算方式

HDP3.1 中 YRAN 和 MR2 的内存大小配置的计算方式

    Container 是 YARN 中基本的处理单元,它是对内存、CPU等计算的封装。总的来说,每个...

1.1-1.5 flume架构概述及安装使用

1.1-1.5 flume架构概述及安装使用

一、flume架构概述 1、flume简介 Flume是一种分布式,可靠且可用的服务,用于有效地收集,聚合和移动大量日志数据。它具有基于流数据流的简单...

Geotools系列之Geotools连接Hbase数据库并读取数据

Geotools系列之Geotools连接Hbase数据库并读取数据

本文主要讲通过GeoTools API 连接Hbase数据库,并且获得数据   添加pom依赖 <properties>...

Windows7单机部署Hbase

Windows7单机部署Hbase

检查/安装JDK1.8   这个安装及环境变量的配置就不再赘述了。    下载Hbase包   下载地址: https...

User Login