五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

YCSB测试HBase远程完全分布式集群

YCSB测试HBase远程完全分布式集群

写在前面 本文只讲一个很简单的问题,YCSB对HBase集群的测试。虽然网上有很多介绍YCSB测试HBase的文章,但都是针对本地HBase伪分布式集群的...

MongoDB系列二(介绍).

MongoDB系列二(介绍).

  一、特点     学习一个东西,至少首先得知道它能做什么?适合做什么?有什么优缺点吧?    ...

高可用Kubernetes集群-1. 集群环境

高可用Kubernetes集群-1. 集群环境

参考文档: 部署kubernetes集群1:https://github.com/opsnull/follow-me-install-kuberne...

MongoDB Sharding分片配置

MongoDB Sharding分片配置

Ps:mongod是mongodb实例,mongos被默认为为mongodb sharding的路由实例。 本文使用的mongodb版本为3.2.9,...

企业电商信息API

企业电商信息API

描述:根据企业名称关键词查询返回企业名称 、店铺名称、电商平台 、平台类型、数据所属期、销售总额 、总销量、省份、城市、主营大类、主营小类、店铺地址等。应用...

Amazon Web Services (目录)

Amazon Web Services (目录)

一、官方声明 AWS云全球服务基础设施区域列表 AWS产品定价国外区 AWS产品定价中国区 (注意!需要登陆账户才能查看) AWS产品费用...

Windows下MongoDB的安装

Windows下MongoDB的安装

Windows下MongoDB的安装与配置 介绍:因为学习python爬虫框架,需要安装MongoDB,在此记录安装过程。(参考了网上很多文章,在此对各位...

kafka connect,将数据批量写到hdfs完整过程

kafka connect,将数据批量写到hdfs完整过程

版权声明:本文为博主原创文章,未经博主允许不得转载 本文是基于hadoop 2.7.1,以及kafka 0.11.0.0。kafka-connect是以单...

【redis源码阅读】redis对象

【redis源码阅读】redis对象

结构定义 在redis中,对象的数据结构定义如下: ​typedef struct redisObject { ​unsigned type:4...

用redis统计大量用户的登陆情况[只判断是否活跃]

用redis统计大量用户的登陆情况[只判断是否活跃]

有这样的一个场景需求:有上亿的用户,要统计这批用户的登陆情况,例如一周连续登陆,连续三天是是否登陆,一周活跃天数等用户 存在的挑战 数据...

三方面搞定http协议之“状态码”

三方面搞定http协议之“状态码”

      当我们向服务器请求数据的时候,服务器会给我们一个反馈,告诉我们对待我们的请求,服务器处理得怎么样了,而这个反馈,是...

三方面搞定http协议之“报文模型”

三方面搞定http协议之“报文模型”

  关于http协议,这一块的知识其实相当大,但是作为一个前端开发者来说,我觉得只要知道三方面的内容就足矣把http协议是个什么东西解释清楚了。而这三方面,...

User Login