说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...
背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...
本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...
摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...
一、环境及软件准备 1、集群规划...
Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...
1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...
1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...
近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...
1. 什么是函数? f(x) = x + 1 y = x + 1 函数是对功能或者动作的封装 2. 函数的语法和定义 1 def 函数名(): 2...
前言 以博客园为例，爬取我的博客上首页的发布时间、标题、摘要，本篇先小试牛刀，先了解下它的强大之处，后面讲beautifulsoup4的详细功能。 &n...
新建发送邮件类 import smtplib from email.mime.text import MIMEText from email.header...
我在jupyter notebook中新建了一个基于py3.6的kernel用来进行tensorflow学习 但是在jupyter notebook中建立...
一、列表 定义：[]内以逗号分隔，按照索引，存放各种数据类型，每个位置代表一个元素 创建： list_test = ["王二","张三",...
淘宝商品比价定向爬虫 功能描述： 1、目标：获取淘宝搜索页面的信息，提取其中的商品名称和价格 2、理解：淘宝的搜索接口，翻页处理 技...
import timeimport threadingdef outer(func): def inner(*args, **kwargs):...
项目步骤 定义首页模板index.html <!DOCTYPE html> <html lang="en"&g...
治大国若烹小鲜。以道莅天下 ——老子《道德经》 本节内容 Django web项目的运行流程分析 视图处理函数的定义 多视图处理函数及接...
本次是股票定向爬取，从东方财富网上获取所有股票代码，然后在百度股票网上打开每个个股股票信息，提取所要保存的股票信息。采取的技术路线是re+bs4+reque...
编码规范 编码 如无特殊情况, 文件一律使用 UTF-8 编码 如无特殊情况, 文件头部必须加入 #--coding:utf...
1. 函数是什么 函数是对功能或者动作的封装 2. 函数的语法和定义 def 函数名(): 函数体 调用: 函数名() def...
实力缔造非凡，成功绝非偶然！
