五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

文本挖掘--美团实战(三)

文本挖掘--美团实战(三)

一、背景 评论是用户对实体的评价,但是一方面评论数量相对交易少,另一方面篇幅过长指导作用较低 二、标签的抽取 1.数据获取与预处理 2.无监督...

在26个大小写字母(52个),以及9个数字组成的字符列表中, 随机生成10个8位密码.

在26个大小写字母(52个),以及9个数字组成的字符列表中, 随机生成10个8位密码.

print(ord('A')) print(ord('a')) print(ord('0')) import random SecChar=[]...

hive的metatable学习

hive的metatable学习

一、存储Hive版本的元数据表(VERSION)   二、Hive数据库相关的元数据表(DBS、DATABASE_PARAMS) DBS --存储...

Scala字符穿插值器

Scala字符穿插值器

从2.10.0版本开始,Scala提供了三种创新的字符串插值方法: s、f 和 raw 于2.11.0版本开始,用于模式匹配patter match中 小...

数据仓库学习小结

数据仓库学习小结

关系模型、多维模型和Data Vault模型是三种常见的数据仓库模型. 数据结构、完整性约束和SQL语言是关系模型的三个要素. 规范化是通过应...

JOIN中的外连接(external join)

JOIN中的外连接(external join)

外连接: ---外连接并不要求连接的两表的每一条记录在对方表中都有一条匹配记录.要保留所有记录(甚至这条记录没有匹配的记录也要保留)的表成为保留表.外连接...

App开发(连接外部服务器)

App开发(连接外部服务器)

第一步:导入httpClient第二步: 容许网络接口权限<uses-permission android:name="android.permis...

将流数据输出到Mysql中

将流数据输出到Mysql中

outputMysqlApp.scala import java.sql.DriverManager import org.apache.spark.S...

mysql 触发器

mysql 触发器

官网说明如下: 触发器是与表关联的命名数据库对象,并在表发生特定事件时激活。触发器的一些用途是执行对要插入表中的值的检查,或者对更新中涉及的值执行计算。...

updataStateByKey算子的使用

updataStateByKey算子的使用

updataStateByKeyApp.scala import org.apache.spark.SparkConf import org.apache...

ubuntu安装伪分布式Hadoop3.1.2

ubuntu安装伪分布式Hadoop3.1.2

作业要求:https://edu.cnblogs.com/campus/gzcc/GZCC-16SE1/homework/3223   本文是...

GYM 101933D(最短路、二分、dp)

GYM 101933D(最短路、二分、dp)

要点 非要先来后到暗示多源最短路,求最小的最大值暗示二分 二分内部的check是关键,dp处理一下,\(dp[i]\)表示第\(i\)笔订单最早...

User Login