五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

windows安装mysql

windows安装mysql

1. 下载版本,官网:https://dev.mysql.com/downloads/mysql/ 2. 解压 3. mysql-5.7....

POJ 2251 Dungeon Master

POJ 2251 Dungeon Master

Dungeon Master   You are trapped in a 3D dungeon and need to find the quickes...

Spark SQL,如何将 DataFrame 转为 json 格式

Spark SQL,如何将 DataFrame 转为 json 格式

今天主要介绍一下如何将 Spark dataframe 的数据转成 json 数据。用到的是 scala 提供的 json 处理的 api。 用过 Spa...

python爬取英语学习资料并发送邮件

python爬取英语学习资料并发送邮件

新建发送邮件类 import smtplib from email.mime.text import MIMEText from email.header...

【笔记】黄如花.信息检索.前4章心得(新增大牛汇总的公开课资源)

【笔记】黄如花.信息检索.前4章心得(新增大牛汇总的公开课资源)

【博客导航】 【信息检索导航】 内容简介 第1和第2章,通过视频、案例,讲述了信息检索对我们生活的影响,提到了检索工具、检索词、如何分析等。...

jupyter notebook中出现ValueError: signal only works in main thread 报错 即 长时间in[*] 解决办法

jupyter notebook中出现ValueError: signal only works in main thread 报错 即 长时间in[*] 解决办法

我在jupyter notebook中新建了一个基于py3.6的kernel用来进行tensorflow学习 但是在jupyter notebook中建立...

Linux系统下 MySQL 安装 指南(5.7和8.0 版本)

Linux系统下 MySQL 安装 指南(5.7和8.0 版本)

一. 准备工作 1 删除本地centos7中的mariadb: 查看系统中是否已安装 mariadb 服务: rpm -qa | grep maria...

列表、元祖

列表、元祖

一、列表 定义:[]内以逗号分隔,按照索引,存放各种数据类型,每个位置代表一个元素 创建:   list_test = ["王二","张三",...

淘宝商品定向爬取

淘宝商品定向爬取

淘宝商品比价定向爬虫 功能描述: 1、目标:获取淘宝搜索页面的信息,提取其中的商品名称和价格 2、理解:淘宝的搜索接口,翻页处理   技...

直观理解神经网络最后一层全连接+Softmax

直观理解神经网络最后一层全连接+Softmax

目录 写在前面 全连接层与Softmax回顾 加权角度 模板匹配 几何角度 Softmax的作用 总结 参考...

分布式系统一致性算法备注

分布式系统一致性算法备注

1. 传统算法:quorum NRW, 2pc, 3pc等 2. Paxos算法 论文:《paxos made simple》, 《The Part-T...

py装饰器

py装饰器

import timeimport threadingdef outer(func): def inner(*args, **kwargs):...

User Login