五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Python 自动登录哔哩哔哩(2captcha打码平台)

Python 自动登录哔哩哔哩(2captcha打码平台)

前言   研究爬虫的各位小伙伴都知道,需要登录才能获取信息的网站,是比较难爬的,原因就是在于,现在各大网站为了反爬,都加入了图片验证码,滑动验证码之类的干...

Django ORM中常用的字段类型以及参数配置

Django ORM中常用的字段类型以及参数配置

一、数值型 AutoField对应int(11)。自增主键,Django Model默认提供,可以被重写。 BooleanField对应tiny...

Python 中 configparser 配置文件的读写及封装,配置文件存放数据,方便修改

Python 中 configparser 配置文件的读写及封装,配置文件存放数据,方便修改

1. 将程序中不常变化的数据放在配置文件中,有什么好处? 将配置统一放在一起,进行统一管理,方便维护,方便修改 配置文件将存放测试数据比如:...

女神说不能每张照片P的一样,所以朋友圈开三天可见,用Python一步解决

女神说不能每张照片P的一样,所以朋友圈开三天可见,用Python一步解决

大家好,我是小三十三,一个刚恰完午饭,正在用刷网页浪费生命的蒟蒻... 一堆堆无聊八卦信息的网页内容慢慢使我的双眼模糊,一个哈欠打出了三斤老泪,就在此时我...

7.Python列表

7.Python列表

  List列表   序列是Python中最基本的数据结构。序列中的每个元素都分配一个数字 - 它的位置,或索...

Python 中 openpyxl 模块封装,读写 Excel 文件中自动化测试用例

Python 中 openpyxl 模块封装,读写 Excel 文件中自动化测试用例

往往我们在自动化测试汇总,会将数据放在 Excel 文件、CSV文件、数据库 Python中处理 excel 数据的模块非常多,比如: xlxd(只读)、...

用 Python 编写一个天气查询应用 pyqt5

用 Python 编写一个天气查询应用 pyqt5

​   效果预览: !   ​   一、获取天气信息   使用python获取天气有...

【踩坑记录】记录一次使用Python logging库多进程打印日志的填坑过程

【踩坑记录】记录一次使用Python logging库多进程打印日志的填坑过程

背景: 项目使用Python自带的logging库来打印日志 项目部署在一台Centos7的机器上 项目采用gunicorn多进程部署...

Python 爬虫是什么

Python 爬虫是什么

作为程序员,相信大家对“爬虫”这个词并不陌生,身边常常会有人提这个词,在不了解它的人眼中,会觉得这个技术很高端很神秘。不用着急,我们的爬虫系列就是带你去...

Win10下用selenium、Image.crop() 截图时、坐标不准确的问题

Win10下用selenium、Image.crop() 截图时、坐标不准确的问题

截百度按钮的图 先将整个窗口的图保存下来 from selenium import webdriver driver = webdriver.C...

Python 中 unittest 框架加载测试用例的常用方法

Python 中 unittest 框架加载测试用例的常用方法

  unittest 当中为我们提供了许多加载用例的方法,这里说下常用的两种方法。。。推荐使用第二种 第一种加载测试用例的方法:使用加载器加载两个模块...

Python 中 unittest 单元测试框架中概念、作用、运行、用例执行顺序、断言方法、装饰器

Python 中 unittest 单元测试框架中概念、作用、运行、用例执行顺序、断言方法、装饰器

  现在正在使用 unittest 框架,我们来记录下这个框架的知识点;   unittest 框架:我们在写接口用例的时候,会继承 unittest 当...

User Login