五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

python基础入门之十五 —— 类与对象

python基础入门之十五 —— 类与对象

一、定义 类是对一系列具有相同特征和行为的事物的统称,是一个抽象的概念,不是真实存在的事物。 对象是类创建出来的真实存在的事物。 开发中,先...

行锁(7)

行锁(7)

MySQL的行锁在引擎层由各个引擎自己实现的,但并不是所有的引擎都支持行锁。 不支持行锁意味着并发控制只能使用表锁,对于这种引擎的表,同一张表任何时刻只能有...

vnpy源码阅读学习(8):关于app

vnpy源码阅读学习(8):关于app

关于app 在入口程序中,我们看到了把 gateway,app, 各类的engine都添加到mainEngine中来。不难猜测gateway主要是处理跟外...

索引下(5)

索引下(5)

在下列表T中,执行select * from T where k betwee 3 and 5;,需要执行几次树的搜索操作? mysql> crea...

索引上(4)

索引上(4)

索引 作用:提高数据查询的效率 常用索引模型 哈希表 有序数组 搜索树 哈希表 以键值对的形式存储,适合于只有等值查询的场景。 用...

事务隔离(3)

事务隔离(3)

事务 保证一组数据库操作,要么全部成功,要么全部失败。 ACID特性 原子性:Atomicity 一致性:Consistency 隔离性...

日志系统(2)

日志系统(2)

redo log redo log:重做日志。每当有操作时,在数据变更之前将操作写入redo log,这样当发生掉电之类的情况时系统可以在重启后继续操作...

基础架构(1)

基础架构(1)

MySQL分为两部分: Server层 包含连接器、查询缓存、分析器、优化器、执行器等,涵盖MySQL的大多数核心服务功能,以及所有的内置函数(如日...

MongoDB操作符之$elemMatch

MongoDB操作符之$elemMatch

问题 如果MongoDB 数据库集合中仅存在一条记录 { "_id" : ObjectId("5e6b4ef546b5f44e5c5b276d"...

Python3标准库:threading进程中管理并发操作

Python3标准库:threading进程中管理并发操作

1. threading进程中管理并发操作 threading模块提供了管理多个线程执行的API,允许程序在同一个进程空间并发的运行多个操作。...

MySQL REPLACE INTO 的使用

MySQL REPLACE INTO 的使用

前段时间写游戏合服工具时出现过一个问题,源DB和目标DB角色表中主键全部都不相同,从源DB取出玩家数据再使用 replace into 写入目标DB中,结果...

最短路算法实现与分析:Dijkstra算法,Floyed,Bellman-Ford, SPFA算法;

最短路算法实现与分析:Dijkstra算法,Floyed,Bellman-Ford, SPFA算法;

最短路算法:最短路径算法是图论研究中,一个经典算法问题;旨在寻找图(由结点和路径组成的)中两结点之间的最短路径。 确定起点的最短路径问题:已知起始点,求最...

User Login