五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

python scrapy 实战简书网站保存数据到mysql

python scrapy 实战简书网站保存数据到mysql

  1:创建项目 2:创建爬虫 3:编写start.py文件用于运行爬虫程序 # -*- coding:utf-8 -*- #...

Python学习之旅(三十三)

Python学习之旅(三十三)

Python基础知识(32):网络编程(Ⅰ) 网络通信是两台计算机上的两个进程之间的通信,而网络编程就是如何在程序中实现两台计算机的通信 P协议负责把数...

Python函数的装饰器

Python函数的装饰器

函数的装饰器. 1. 装饰器   开闭原则:         对...

python之装饰器(函数)

python之装饰器(函数)

1. 装饰器   遵循的原则:     开闭原则:   对功能的扩展开放  对代码的修改是封闭 # 通用装饰器写法 # 存在的...

python scrapy实战糗事百科保存到json文件里

python scrapy实战糗事百科保存到json文件里

  编写qsbk_spider.py爬虫文件 # -*- coding: utf-8 -*- import scrapy from...

Python 执行 mysql 存储过程

Python 执行 mysql 存储过程

mysql 创建简单的临时表 tmp create database test; use test; DROP TABLE IF EXISTS `tmp...

Golang:List

Golang:List

List的接口 1 func New() *List...

AlphaZero并行五子棋AI

AlphaZero并行五子棋AI

AlphaZero-Gomoku-MPI Link Github : AlphaZero-Gomoku-MPI Overview This re...

Golang:sync.Map

Golang:sync.Map

由于map在gorountine 上不是安全的,所以在大量并发读写的时候,会出现错误。 在1.9版的时候golang推出了sync.Map. sync....

Pythonx_day1

Pythonx_day1

1 # python3中的 str 和 byte(即二进制)转换 2 msg = "β" 3 # 转换为二进制,打印,‘encoding = '...

一起学爬虫——一步一步打造爬虫代理池

一起学爬虫——一步一步打造爬虫代理池

最近在使用爬虫爬取数据时,经常会返回403代码,大致意思是该IP访问过于频繁,被限制访问。限制IP访问网站最常用的反爬手段了,其实破解也很容易,就是在爬取网...

算法笔记-复杂度分析1

算法笔记-复杂度分析1

算法复杂度分析 是什么 什么是算法复杂度分析? 通过时间和空间两个维度来评估算法和数据结构的性能。 用时间复杂度 (时间渐进复杂度) 和空间...

User Login