五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

算法与数据结构(3):基本数据结构——链表,栈,队列,有根树

算法与数据结构(3):基本数据结构——链表,栈,队列,有根树

原本今天是想要介绍堆排序的。虽然堆排序需要用到树,但基本上也就只需要用一用树的概念,而且还只需要完全二叉树,实际的实现也是用数组的,所以原本想先把主要的排序...

Python 常见的17个错误分析

Python 常见的17个错误分析

对于刚入门的Pythoner在学习过程中运行代码是或多或少会遇到一些错误,刚开始可能看起来比较费劲。随着代码量的积累,熟能生巧当遇到一些运行时错误时能够很快...

如果有一个特别大的访问量到数据库上,怎么做优化?主从复制、读写分离

如果有一个特别大的访问量到数据库上,怎么做优化?主从复制、读写分离

第一个就是使用优化查询的方法。这个在前期的内容中有具体说明,这里不再做说明。 第二、这里简要说明一个以下几个方法:   主从复制、读写分离、负载均衡...

腾讯t4架构推荐:一份程序员必备的结构算法算法之道!

腾讯t4架构推荐:一份程序员必备的结构算法算法之道!

  引言 "语言只是工具,算法才是程序的灵魂。"这句话相信每一个程序员都听过无数次。然而在实际的工作中,一个产品从开发到上线,似乎哪一步都用不...

爬虫之移动端数据捕获

爬虫之移动端数据捕获

移动端数据捕获 第三方抓包工具 Fiddler(window) 青花瓷(mac) miteproxy...

计算机视觉(3):用inception-v3模型重新训练自己的数据模型

计算机视觉(3):用inception-v3模型重新训练自己的数据模型

用inception-v3重新训练自己的数据模型 背景: 现代的图像识别模型具有数以百万计的参数,从头开始训练(Train from scratch...

用Python给你的女神带上口罩~

用Python给你的女神带上口罩~

前言 2019 年底开始蔓延的新型肺炎疫情牵动人心,作为个体,我们力所能及的就是尽量待在家中少出门。 看到一些朋友叫设计同学帮忙给自己的头像戴上口罩,作...

pip安装库慢问题解决方法

pip安装库慢问题解决方法

pip config set global.index-url http://mirrors.aliyun.com/pypi/simple/ 清华大学 h...

生物学中的机器学习:使用K-Means和PCA进行基因组序列分析 COVID-19接下来如何突变?

生物学中的机器学习:使用K-Means和PCA进行基因组序列分析 COVID-19接下来如何突变?

作者:Andre Yedeephub翻译组:孟翔杰许多人没有想到,病毒就像地球上为生存而挣扎的其他生物一样,它们会进化或变异。 只要看一看人类病毒来源的蝙...

Buy Tickets POJ - 2828(线段树,单点更新,区间查询)

Buy Tickets POJ - 2828(线段树,单点更新,区间查询)

题目链接:https://i-beta.cnblogs.com/posts/edit 思路:对输入数据反向思考,那么输入的位置x代表他之前已经有x个人存在...

如何用 Python 画出新型冠状病毒疫情地图?

如何用 Python 画出新型冠状病毒疫情地图?

近日,在笔者的微信群里,白垩老师问如何用Python画武汉肺炎疫情地图。白垩老师是研究海洋生态与地球生物的学者,国家重点实验室成员,于不惑之年学习Pytho...

Python爬虫系列之 xpath:html解析神器

Python爬虫系列之 xpath:html解析神器

通过前面的文章,我们已经知道了如何获取网页和下载文件,但是前面我们获取的网页都是未经处理的,冗余的信息太多,无法进行分析和利用 这一节我们就来学习怎么从网...

User Login