五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Python爬虫连载16-OCR工具Tesseract、Scrapt初步

Python爬虫连载16-OCR工具Tesseract、Scrapt初步

一、验证码破解 1.(上承连载15)极验 (1)官网:http://www.geetest.com 破解比较麻烦、可以模拟鼠标移动、一直在进化 二、...

channel的基本使用

channel的基本使用

1、管道分类 读写管道 只读管道 只写管道 缓冲通道 :创建时指定大小(如果不指定默认为非缓冲通道) 2、正确使用管道...

Python3标准库:pickle对象串行化

Python3标准库:pickle对象串行化

1. pickle对象串行化 pickle模块实现了一个算法可以将任意的Python对象转换为一系列字节。这个过程也被称为串行化对象。可以传输或...

自然语言处理中预训练模型一览

自然语言处理中预训练模型一览

预训练模型的梳理总结 摘要 本报告将从以下几个方面梳理预训练模型,陈述预训练(特指nlp领域)的what和how,总结预训练加微调模式的好处和弊...

Python学习笔记之Python迭代器正确使用方法详解

Python学习笔记之Python迭代器正确使用方法详解

一、迭代器相关迭代器(iterator)有时又称游标(cursor)是程序设计的软件设计模式,可在容器(container,例如链表或阵列)上遍访的接口,设...

开线程爬取黑猫里的阿里投诉信息

开线程爬取黑猫里的阿里投诉信息

仅供学习,请适度开线程 一.代码 import requests from requests_html import HTMLSession impor...

携手极客时间,云间拾遗再出发

携手极客时间,云间拾遗再出发

是的,云间拾遗再次更新了。 近期的疫情牵动着每一个人的心。和大家一样,除了做好防护之外,我也焦急地关心着形势的发展和起伏。每每看到动人的事迹,或令人扼腕的...

快速上手项目远程团队协作--CODING(新手向)

快速上手项目远程团队协作--CODING(新手向)

快速上手项目远程团队协作--CODING(新手向) CODING网址:https://e.coding.net/signin 前言:之前用过github...

基础算法策略总结-分而治之,动态规划,贪心策略; 回溯法和分支定界;

基础算法策略总结-分而治之,动态规划,贪心策略; 回溯法和分支定界;

最近在刷算法题目,突然重新思考一下大二时学习的算法分析与设计课程,发现当时没有学习明白,只是记住了几个特定的几个题型;现在重新回归的时候,上升到了方法学上了...

基础算法策略总结-分而治之,动态规划,贪心策略

基础算法策略总结-分而治之,动态规划,贪心策略

最近在刷算法题目,突然重新思考一下大二时学习的算法分析与设计课程,发现当时没有学习明白,只是记住了几个特定的几个题型;现在重新回归的时候,上升到了方法学上了...

Mysql架构

Mysql架构

目录 Mysql架构 MySQL逻辑架构 连接管理与安全性 优化与执行...

MySQL InnoDB锁(翻译自官方手册)

MySQL InnoDB锁(翻译自官方手册)

本文基于mysql 8.0,官方手册: https://dev.mysql.com/doc/refman/8.0/en/innodb-locking.htm...

User Login