五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

bzoj1951 [SDOI2010]古代猪文

bzoj1951 [SDOI2010]古代猪文

题目链接 solution 理解完题意。发现就是求\(g^{\sum\limits_{k|n}C_n^k}\)。 利用欧拉降幂,可以将式子写成\(g^...

为什么pymysql执行SQL语句后提示成功,但没有实际操作数据库?

为什么pymysql执行SQL语句后提示成功,但没有实际操作数据库?

  原因:   pymysql在连接数据库的时候会有一个参数autocommit,表示执行完SQL语句是否自动提交到真正的数据库,默认为Fal...

剑指Offer-001:二维数组中的查找

剑指Offer-001:二维数组中的查找

一、前言 本系列文章为《剑指Offer》刷题笔记。 刷题平台:牛客网 二、题目 在一个二维数组中,每一行都按照从左到右递增的顺序排序,每一列都按照从...

PHP实现redis订阅和发布(用于异步任务处理)

PHP实现redis订阅和发布(用于异步任务处理)

1.概念名称及含义channel 频道:生产者和消费者直接操作的对象publish 生产者:向channel发送消息subscribe 消费者:订阅一个或多...

mysql搭建亿级cmd5数据库,毫秒级查询 完全过程

mysql搭建亿级cmd5数据库,毫秒级查询 完全过程

前言: 最近也在玩数据库,感觉普通机子搞数据库,还是差了点,全文查找,慢的要查一分钟更久。 但是搞cmd5库很不错,亿级数据库,毫秒级。 ...

How to write XML-RPC clients

How to write XML-RPC clients

https://blog.papercut.com/write-xml-rpc-clients/   The XML-RPC network...

常见安全产品部署运营注意事项

常见安全产品部署运营注意事项

防火墙 当前主流防火墙在基本的基于五元组(源目IP、源目端口、协议号)检查的基础上引入了状态检测,即对于接收的报文顺序有所要求,比如需要先接受到某个5元组...

从创建索引过程中内存变化来看SQL Server与MySQL的内存淘汰算法

从创建索引过程中内存变化来看SQL Server与MySQL的内存淘汰算法

在sqlserver中,几年之前就注意到一个现象:sqlserver中对一个大表创建索引或者rebuild索引的过程中,会引起内存剧烈的动荡,究其原因为何,...

字符串在Python内部是如何省内存的?案例详解

字符串在Python内部是如何省内存的?案例详解

起步 Python3 起,str 就采用了 Unicode 编码(注意这里并不是 utf8 编码,尽管...

给Python初学者的最好练手项目,值得收藏

给Python初学者的最好练手项目,值得收藏

有很多朋友问我学习了Python后,有没有什么好的项目可以练手。 其实,做项目主要还是根据需求来的。但是对于一个初学者来说,很多复杂的项目没办法独立完成...

gorm系列-简单入门

gorm系列-简单入门

简介 GORM系列:b站搜七米 文档:https://www.liwenzhou.com/posts/Go/gorm/ 什么是ORM:Object(对...

Python 3.9 性能优化:更快的 list()、dict() 和 range() 等内置类型

Python 3.9 性能优化:更快的 list()、dict() 和 range() 等内置类型

Python 的 3.9.0 版本正在开发中,计划在 2020-10-05 发布 final 版本。 官方在 changelog 中披露了很多细节,其中有...

User Login