五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

ZooKeeper的使用---命令端

ZooKeeper的使用---命令端

一、进入命令行 ./bin/zkCli.sh   二、常用命令  ...

hive工作记录-20180513

hive工作记录-20180513

Hive的数据导入:   1.从本地文件系统中导入数据到Hive表     基础语法1 :       create table 表名(列名1 数据类...

eclipse以MapReduce本地模式运行程序

eclipse以MapReduce本地模式运行程序

1.准备好所需的文件winutils.exe、hadoop-eclipse-plugin-2.7.3.jar、hadoop-common-2.2.0-bin...

技巧-如何通过hive开发平台上传csv文件

技巧-如何通过hive开发平台上传csv文件

通过数据交换平台上传较大的文件时,经常会出现导入失败情况,换种方式通过新数据开发平台(stark)也可以轻松实现外部数据与hive的数据关联。 ...

Kafka基础认识

Kafka基础认识

     1):Apache kafka介绍及架构详解 假设一个场景: 数据源: 应用系统A 产生的用户访问数据和订单数据...

Apache Flume 学习笔记

Apache Flume 学习笔记

# 从http://flume.apache.org/download.html 下载flume ############################...

hadoop3.1.0 HDFS快速搭建伪分布式环境

hadoop3.1.0 HDFS快速搭建伪分布式环境

  1.环境准备 CenntOS7环境 JDK1.8-并配置好环境变量 下载Hadoop3.1.0二进制包到用户目录下...

Hadoop分布式集群的搭建

Hadoop分布式集群的搭建

本文由  网易云 发布。    上一篇文章介绍了如何搭建Hadoop伪分布式集群,本篇将向大家介绍下Hadoop分...

Kafka学习笔记一:基本术语与概念

Kafka学习笔记一:基本术语与概念

1. Kafka 简介 Kafka是一种分布式的,基于发布/订阅的消息系统,起源于 LinkedIn,用作 LinkedIn 的活动流和运营数据处理管道的...

2017年网易有数用户定位和产品能力

2017年网易有数用户定位和产品能力

本文由  网易云 发布。   一、商业智能行业分析   根据Gartner、Tableau等发布的行业权威报告,201...

Hadoop学习笔记05_HA

Hadoop学习笔记05_HA

################# HA 即 High Available 高可用。# 其作用是为了减少主从结构的单点故障,而设置备用节点,既然学习了Had...

[HDFS Manual] CH8 HDFS Snapshots

[HDFS Manual] CH8 HDFS Snapshots

HDFS Snapshots HDFS Snapshots. 1 1. 概述... 1 1.1 Snapshottable目录... 1 1.2 快...

User Login