五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Storm参数配置及代码优化

Storm参数配置及代码优化

背景本人在维护一套由storm、kafka、zookeeper组成的分布式实时计算系统。当数据量很小的时候,系统处理起来其实是绰绰有余的,基本上按照系统默认...

Apache Doris在美团外卖数仓中的应用实践

Apache Doris在美团外卖数仓中的应用实践

序言美团外卖数据仓库技术团队负责支撑日常业务运营及分析师的日常分析,由于外卖业务特点带来的数据生产成本较高和查询效率偏低的问题,他们通过引入Apache D...

kafka学习笔记之架构详解

kafka学习笔记之架构详解

基本概念Kafka 体系架构Kafka 体系架构包括若干 Producer、若干 Broker、若干 Consumer,以及一个 ZooKeeper 集群。...

如何学习大数据技术?大数据怎么入门?怎么做大数据分析?数据科学需要学习那些技术

如何学习大数据技术?大数据怎么入门?怎么做大数据分析?数据科学需要学习那些技术

由于大数据技术涉及内容太庞杂,大数据应用领域广泛,而且各领域和方向采用的关键技术差异性也会较大,难以三言两语说清楚,本文来说说到底要怎么学习它,以及怎么避免...

学习大数据的正确方法

学习大数据的正确方法

大数据已然成为当前IT业界的红人,然而在很多人想涉足这个领域时,却对大数据的学习具有畏难情绪,望而却步,知难而退。大数据的学习真的有那么难吗?据我学习大数据...

Nginx动静分离(Nginx+Tomcat)

Nginx动静分离(Nginx+Tomcat)

第一步:nginx构建 第二步:Tomcat构建 1.Tomcat基础点 (1)Tomcat 是基于java开发的web容器,用来发布java代...

大数据学习路线,来qun里分享干货,

大数据学习路线,来qun里分享干货,

一、Linux lucene: 全文检索引擎的架构 solr: 基于lucene的全文搜索服务器,实现了可配置、可扩展并对查询性能进行了优化,并且提供了...

【大数据】SparkSql 连接查询中的谓词下推处理 (一)

【大数据】SparkSql 连接查询中的谓词下推处理 (一)

本文首发于 vivo互联网技术 微信公众号 https://mp.weixin.qq.com/s/YPN85WBNcnhk8xKjTPTa2...

搜索引擎框架之ElasticSearch基础详解

搜索引擎框架之ElasticSearch基础详解

文章大纲 一、搜索引擎框架基础介绍二、ElasticSearch的简介三、ElasticSearch安装(Windows版本)四、ElasticSearc...

大数据-----大数据-机器学习-人工智能

大数据-----大数据-机器学习-人工智能

1.大数据与机器学习的关系: 大数据领域我们做的是数据的存储和简单的统计计算,机器学习在大数据的应用是为了发现数据的规律或模型,用机器学习算法对数据进行计...

搜索引擎框架介绍

搜索引擎框架介绍

一、搜索引擎基础介绍二、常见搜索引擎框架介绍与比较三、参考文章   一、搜索引擎基础介绍 1. 什么是搜索引擎   搜索...

Redis之高可用、集群、云平台搭建

Redis之高可用、集群、云平台搭建

文章大纲 一、基础知识学习二、Redis常见的几种架构及优缺点总结三、Redis之Redis Sentinel(哨兵)实战四、Redis之R...

User Login