五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

数据集网站收集(可用于机器学习,数据挖掘等,持续更新)

数据集网站收集(可用于机器学习,数据挖掘等,持续更新)

数据集网站收集(持续更新) 1.Kaggle: https://www.kaggle.com/ 可以按关键字搜索数据集 自带讨论区 有热心...

神经网络中的Max pooling 和 Average pooling

神经网络中的Max pooling 和 Average pooling

      在训练卷积神经网络模型时,经常遇到max pooling 和 average pooli...

深度学习中的激活函数之 sigmoid、tanh和ReLU

深度学习中的激活函数之 sigmoid、tanh和ReLU

      三种非线性激活函数sigmoid、tanh、ReLU。 sigmoid: y = 1/(1 +...

机器学习相关数学基础

机器学习相关数学基础

视频学习笔记 (1)概率论与贝叶斯先验 视频地址:https://www.bilibili.com/video/BV1Tb411H7uC?p=2 概率...

深度学习中的图像数据预处理——图像去均值(image mean or pixel mean)

深度学习中的图像数据预处理——图像去均值(image mean or pixel mean)

    首先引用下网上的解释: For a grayscale image, every pixel in the mean im...

(二)马尔可夫决策过程

(二)马尔可夫决策过程

(for pursue, do accumulation) 个人笔记,纯属佛系分享,如有错误,万望赐教。   马尔可夫决策过程(Markov Deci...

使用mask scoring RCNN训练自己的数据集

使用mask scoring RCNN训练自己的数据集

本文主要参考下面两篇博文,并在部分细节处做了修改。 https://blog.csdn.net/XX_123_1_RJ/article/details/1...

Pytorch自动求解梯度

Pytorch自动求解梯度

要理解Pytorch求解梯度,首先需要理解Pytorch当中的计算图的概念,在计算图当中每一个Variable都代表的一个节点,每一个节点就可以代表一个神经...

神经网络中的 Epochs, Batchsize, Iterations 具体是什么

神经网络中的 Epochs, Batchsize, Iterations 具体是什么

    在看神经网络相关的论文时,总是能看到Epochs, Batchsize, Iterations 这些字眼,要弄明白...

无监督学习方法

无监督学习方法

学习资料:吴恩达机器学习课程 一. K-means算法 1. 算法思想 K-均值算法是无监督学习中聚类算法中的一个 初...

写给程序员的机器学习入门 (二) - pytorch 与矩阵计算入门

写给程序员的机器学习入门 (二) - pytorch 与矩阵计算入门

pytorch 简介 pytorch 是目前世界上最流行的两个机器学习框架的其中之一,与 tensoflow 并峙双雄。它提供了很多方便的功能,例如根据损...

计算机视觉图像预处理中的 Zero-mean(零均值化) 和 Normalization(归一化)

计算机视觉图像预处理中的 Zero-mean(零均值化) 和 Normalization(归一化)

        在训练神经网络前,往往要对原始图像数据进行预处理,中心化(Zero-centered及Mea...

User Login