五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

[Intern][2019.04.16] 由Python写成的自动解压脚本

[Intern][2019.04.16] 由Python写成的自动解压脚本

很久很久以前(二十七天吧……大概)被要求写一个脚本来检索并解压磁盘上所有的以特定格式命名的tar文件,于是乎学习和摸鱼就一起开始了。 这次要写的脚本,针对...

django 时区和系统(ubuntu)时区修改

django 时区和系统(ubuntu)时区修改

django时区默认使用UTC,中国人使用CST东八区。 settings.py改为上海时区 #settings.py TIME_ZONE =...

Django—视图

Django—视图

索引         一、URLconf         二、视图         三、HttpReqeust对象           3.1 Qu...

使用 Python 爬取网页数据

使用 Python 爬取网页数据

1. 使用 urllib.request 获取网页 urllib 是 Python 內建的 HTTP 库, 使用 urllib 可以只需要很简单的步骤就能...

需要学习的内容

需要学习的内容

1. 简单的python爬虫,用于从investing爬股票数据,需要掌握requests和beautifulsoap4这两个模块。 2.把爬到的数据存储...

哈希表的原理及实现代码

哈希表的原理及实现代码

哈希表可以表述为,是一种可以根据关键字快速查询数据的数据结构 一. 哈希表有哪些优点? 不论哈希表中数据有多少,增加,删除,改写数据的复杂度平均都是O(...

django rest framework集成微博第三方登录

django rest framework集成微博第三方登录

Django restframework 集成第三方登录(微博、微信、QQ等) 友情链接 python-social-auth-app官方文档 微博开...

django apscheduler在特定时间执行一次任务(run at a specify time only once)

django apscheduler在特定时间执行一次任务(run at a specify time only once)

    如何使程序在特定时间只执行一次,我查了一下。        celery可以,时间以秒计。...

python高级-迭代器(18)

python高级-迭代器(18)

一、什么是迭代器 迭代是访问集合元素的⼀种⽅式。 迭代器是⼀个可以记住遍历的位置的对象。 迭代器对象从集合的第⼀个元素开始访问,直到所有的元...

Python3定时短信获得天气

Python3定时短信获得天气

getWeather 脚本链接:https://github.com/Mrlshadows/getWeather Python环境为 pytho...

Python爬虫入门教程 59-100 python爬虫高级技术之验证码篇5-极验证识别技术之二

Python爬虫入门教程 59-100 python爬虫高级技术之验证码篇5-极验证识别技术之二

图片比对 昨天的博客已经将图片存储到了本地,今天要做的第一件事情,就是需要在两张图片中进行比对,将图片缺口定位出来 缺口图片 完整图片 计算缺口坐...

Numpy库的学习(五)

Numpy库的学习(五)

今天继续学习一下Numpy库,废话不多说,整起走 先说下Numpy中,经常会犯错的地方,就是数据的复制 这个问题不仅仅是在numpy中有,其他地方也同样...

User Login