小翔博客
 首页    Mongodb 
五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

7年前 (2018-12-26) 215256人围观 抢沙发

说明：从严格的列式存储的定义来看，Hbase并不属于列式存储，有人称它为面向列的存储，请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

7年前 (2019-03-13) 32356人围观 抢沙发

背景 过年前，寂寞哥给我三台机器，说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了，寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

7年前 (2019-02-02) 29156人围观 抢沙发

本篇主要讲工作中的真实经历，我们怎么打造亿级日志平台，同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

6年前 (2019-04-07) 28122人围观 抢沙发

摘要： 本文主要介绍了hbase对数据压缩，编码的支持，以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求，...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

7年前 (2019-01-31) 34727人围观 抢沙发

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

6年前 (2019-04-18) 31394人围观 抢沙发

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

6年前 (2019-05-23) 30108人围观 抢沙发

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始，之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

6年前 (2020-01-23) 30314人围观 抢沙发

1.暗黑谷歌的由来 有这么一款搜索引擎，它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

6年前 (2020-01-26) 29182人围观 抢沙发

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目，需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

安装可以查看PMM 源码的Go环境

安装可以查看PMM 源码的Go环境

7年前 (2019-03-19) 781人围观 抢沙发

1.基础介绍 最近在搭建PMM数据库监控系统，我们知道 Prometheus 是 PMM Server 的重要组件，*_exporter是PMM...

Selenium爬取淘宝商品概要入mongodb

Selenium爬取淘宝商品概要入mongodb

7年前 (2019-03-19) 1231人围观 抢沙发

准备： 1.安装Selenium：终端输入 pip install selenium 2.安装下载Chromedriver：解压后放在…\Google\...

自学入门 Python 优质中文资源索引

自学入门 Python 优质中文资源索引

7年前 (2019-03-12) 1389人围观 抢沙发

所有资源基于 Python3 版本，全部中文内容，适用于 爬虫 / Web / 数据 方向，每个单元根据学习习惯从 书籍 / 文档 / 视频 中选择一...

Python爬虫入门教程 48-100 使用mitmdump抓取手机惠农APP-手机APP爬虫部分

Python爬虫入门教程 48-100 使用mitmdump抓取手机惠农APP-手机APP爬虫部分

7年前 (2019-03-12) 2163人围观 抢沙发

1. 爬取前的分析 mitmdump是mitmproxy的命令行接口，比Fiddler、Charles等工具方便的地方是它可以对接Python脚本。 有了...

爬虫之scrapy框架

爬虫之scrapy框架

7年前 (2019-03-09) 1995人围观 抢沙发

　　一、认识scrapy框架 　　何为框架，就相当于一个封装了很多功能的结构体，它帮我们把主要的结构给搭建好了，我们只需往骨架里添加内容就行。scrapy...

数据库MongoDB

数据库MongoDB

7年前 (2019-03-06) 2147人围观 抢沙发

　　一、MongoDB简介 　　MongoDB是由c++语言编写的，是一个基于分布式文件存储的开源数据库系统，在高负载的情况下，添加更多的节点，可以保证服...

PMM Client 安装异常报错

PMM Client 安装异常报错

7年前 (2019-03-05) 949人围观 抢沙发

1.PMM架构 如下图所示  2.Client主要组件 PMM Client是安装在你要监视的MySQL或MongoDB主机上的一组代理...

Python爬虫入门教程 40-100 博客园Python相关40W博客抓取 scrapy

Python爬虫入门教程 40-100 博客园Python相关40W博客抓取 scrapy

7年前 (2019-02-25) 1547人围观 抢沙发

爬前叨叨 第40篇博客吹响号角，爬取博客园博客~本文最终抓取到了从2010年1月1日到2019年1月7日的37W+文章，后面可以分析好多东西了呢 经常看...

爬取豆瓣电影

爬取豆瓣电影

7年前 (2019-02-24) 2106人围观 抢沙发

1：创建爬虫文件，获取url地址       2：使用request获取第一页的请求信息 # -*- codi...

Python爬虫入门教程 39-100 天津市科技计划项目成果库数据抓取 scrapy

Python爬虫入门教程 39-100 天津市科技计划项目成果库数据抓取 scrapy

7年前 (2019-02-24) 967人围观 抢沙发

爬前叨叨 缘由 今天本来没有打算抓取这个网站的，无意中看到某个微信群有人问了一嘴这个网站，想看一下有什么特别复杂的地方，一顿操作下来，发现这个网站除了卡...

Python爬虫入门教程 37-100 云沃客项目外包网数据爬虫 scrapy

Python爬虫入门教程 37-100 云沃客项目外包网数据爬虫 scrapy

7年前 (2019-02-20) 1863人围观 抢沙发

爬前叨叨 2019年开始了，今年计划写一整年的博客呢~，第一篇博客写一下 一个外包网站的爬虫，万一你从这个外包网站弄点外快呢，呵呵哒 数据分析 官...

MongoDB 集合间关联查询后通过$filter进行筛选,详解MongoDB中的多表关联查询（$lookup）

MongoDB 集合间关联查询后通过$filter进行筛选,详解MongoDB中的多表关联查询（$lookup）

7年前 (2019-02-19) 1396人围观 抢沙发

在前面的分享中，有讲解 “详解MongoDB中的多表关联查询（$lookup）” 一节，其内容涵盖了常见的集合管理的需求。我们知道文档的选择都是通过$mat...

User Login