说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...
背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...
本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...
摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...
一、环境及软件准备 1、集群规划...
Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...
1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...
1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...
近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...
IDLE的自动补全功能位于：Edit→Show Completions，但每次需要补全的时候都需要点击一次，虽然IDLE提供了一个快捷键（Ctrl + Sp...
01）概述： 关于APP漏洞检测，分为两个层面的安全检测，包括手机应用层，以及APP代码层，与网站的漏洞检测基本上差不多，目前越来越多的手机应用都存在着漏...
概述 数据读写不一定是文件，也可在内存中读写 在内存中读写可分为两种: 1) 读写字符(StringIO)，其操作...
1.当客户端输入一条指令：hdfs dfs -put text.txt /text时，这条命令会给到DistributeFileSystem。 2.通过D...
简介 数据结构是处理数据的结构，或者说，他们是用来存储一组相关数据的。 在Python中三种内建的数据结构--列表、元组和字典。学会了使用它们会使编程...
什么是Nginx？ Nginx是一款高性能，开源的，支持高并发而轻量级的Web服务器，同时也是具有反向代理服务器及电子邮件（IMAP/POP3）的代理服务...
一、写在前面 首先呢，由于之前重装系统，又要重新配置环境，然后还有一些别的事，导致我一直没有写爬虫了，不过现在又可以继续写了。 然后我这次说的模拟登录新...
import requests from bs4 import BeautifulSoup from math import ceil heade...
题目如下。解题步骤参考的是https://cloud.tencent.com/developer/news/373865中作者的思路。 1.首先，两个...
0.环境 操作系统：Windows Python版本：3.6.0 1.前言 PyQt是一个创建GUI应用程序的工具包。它是Python编程语言和...
python读取大文件 较pythonic的方法，使用with结构 文件可以自动关闭 异常可以在with块内处理...
一、shuffle机制概述 shuffle机制就是发生在MR程序中，Mapper之后，Reducer之前的一系列分区排序的操作。shuffle的作用是...
实力缔造非凡，成功绝非偶然！
