五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

翻车现场:我用pytorch和GAN做了一个生成神奇宝贝的失败模型

翻车现场:我用pytorch和GAN做了一个生成神奇宝贝的失败模型

前言 神奇宝贝已经是一个家喻户晓的动画了,我们今天来确认是否可以使用深度学习为他自动创建新的Pokemon。我最终成功地使用了生成对抗网络(GAN)生成了...

PU Learning简介:对无标签数据进行半监督分类

PU Learning简介:对无标签数据进行半监督分类

当只有几个正样本,你如何分类无标签数据 假设您有一个交易业务数据集。有些交易被标记为欺诈,其余交易被标记为真实交易,因此您需要设计一个模型来区分欺诈交易和...

用ms rcnn训练出的模型进行预测时提示缺少工具

用ms rcnn训练出的模型进行预测时提示缺少工具

报错信息如下: Traceback (most recent call last): File "demo/predict.py", line 8,...

从零开始构建:使用CNN和TensorFlow进行人脸特征检测

从零开始构建:使用CNN和TensorFlow进行人脸特征检测

  ​ 人脸检测系统在当今世界中具有巨大的用途,这个系统要求安全性,可访问性和趣味性!今天,我们将建立一个可以在脸上绘制15个关键点的模型。...

sklearn机器学习 系列一 决策树 sklearn.tree

sklearn机器学习 系列一 决策树 sklearn.tree

决策树是如何工作的:                  ...

超参数调整实战:scikit-learn配合XGBoost的竞赛top20策略

超参数调整实战:scikit-learn配合XGBoost的竞赛top20策略

快速学习如何为XGboost优化超参数! 在过去的几年中,XGBoost被广泛用于表格数据推断,并且赢得了数百个挑战。但是,仅仅通过XGBoost并不能完...

手写批量线性回归算法:在Python3中梯度下降方法实现模型训练

手写批量线性回归算法:在Python3中梯度下降方法实现模型训练

手写批量线性回归算法:在Python3中梯度下降方法实现模型训练 作者:Tarun Guptadeephub翻译组:孟翔杰 ​ 在这篇文章中,我们将...

ubuntu下openCV-Haar特征分类器训练

ubuntu下openCV-Haar特征分类器训练

ubuntu下openCV-Haar特征分类器训练 这段时间在学openCV,准备做一个头部检测,但是openCV自带的分类器只有人脸检测的...

不平衡数据集分类实战:成人收入数据集分类模型训练和评估

不平衡数据集分类实战:成人收入数据集分类模型训练和评估

许多二分类任务并不是每个类别都有相同数量的数据,存在着数据分布不平衡的情况。 一个常用的例子是成人收入数据集,它涉及到社交关系、教育水平等个人数据,以此来...

深度学习归一化:BN、GN与FRN

深度学习归一化:BN、GN与FRN

在深度学习中,使用归一化层成为了很多网络的标配。最近,研究了不同的归一化层,如BN,GN和FRN。接下来,介绍一下这三种归一化算法。 BN层 BN层是...

生物学中的机器学习:使用K-Means和PCA进行基因组序列分析 COVID-19接下来如何突变?

生物学中的机器学习:使用K-Means和PCA进行基因组序列分析 COVID-19接下来如何突变?

作者:Andre Yedeephub翻译组:孟翔杰许多人没有想到,病毒就像地球上为生存而挣扎的其他生物一样,它们会进化或变异。 只要看一看人类病毒来源的蝙...

Scikit-Learn 源码研读 (第二期)基类的实现细节

Scikit-Learn 源码研读 (第二期)基类的实现细节

目录 BaseEstimator `get_params` `set_params` Classifie...

User Login