五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

[HDFS Manual] CH7 ViewFS Guide

[HDFS Manual] CH7 ViewFS Guide

ViewFS Guide ViewFS Guide. 1 1 介绍... 1 2. The Old World(Prior to Federation...

2017全球十大云计算平台市场占有率排行榜

2017全球十大云计算平台市场占有率排行榜

从Google首席执行官埃里克·施密特(Eric Schmidt)首次提出“ 云计算 ”(cloud computing)的概念到现在,...

RDD概念、特性、缓存策略与容错

RDD概念、特性、缓存策略与容错

一、RDD概念与特性 1. RDD的概念   RDD(Resilient Distributed Dataset),是指弹性分布式数据集。数据集:Spa...

[HDFS Manual] CH6 HDFS Federation

[HDFS Manual] CH6 HDFS Federation

HDFS Federation HDFS Federation. 1 1 Background. 1 2.多个namenode/namespace....

HBase完全分布式集群搭建

HBase完全分布式集群搭建

HBase完全分布式集群搭建   hbase和hadoop一样也分为单机版,伪分布式版和完全分布式集群版,此文介绍如何搭建完全分布式集群环境搭建。hbas...

大数据概述 ——林子雨老师第一课

大数据概述 ——林子雨老师第一课

大数据概念:数据量大,数据类型繁多,处理速度快,价值密度低 。 大数据的影响: 思维方面:全样而非抽样,效率而非精确,相关而非因果。 关键技术:数据采集...

hadoop误删除恢复

hadoop误删除恢复

在平时 我们在操作hadoop命令的时候 会误删除某些文件 利用 hadoop fs -rmr(目录名)删除目录时易出现误删除的操作 为了防止这种情...

企业电商信息API

企业电商信息API

描述:根据企业名称关键词查询返回企业名称 、店铺名称、电商平台 、平台类型、数据所属期、销售总额 、总销量、省份、城市、主营大类、主营小类、店铺地址等。应用...

kafka connect,将数据批量写到hdfs完整过程

kafka connect,将数据批量写到hdfs完整过程

版权声明:本文为博主原创文章,未经博主允许不得转载 本文是基于hadoop 2.7.1,以及kafka 0.11.0.0。kafka-connect是以单...

User Login