五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

Kafka基础

Kafka基础

简介 #概念:消息中间件(消息系统)      //消息系统分类:  点对点 消...

SparkR链接mysql数据库(踩坑)

SparkR链接mysql数据库(踩坑)

本文主要讲述sparkR链接Mysql的过程和坑。 SparkR的开发可以用RStudio工具进行开发,连接spark可以通过RStudio界面中的Con...

sqoop import/export使用经验

sqoop import/export使用经验

一.先创建一个小表(test_01)进行测试(主节点IP:169.254.109.130/oracle服务器IP:169.254.109.100) 1....

Spark2.1.0——运行环境准备

Spark2.1.0——运行环境准备

      学习一个工具的最好途径,就是使用它。这就好比《极品飞车》玩得好的同学,未必真的会开车,要学习车的驾驶技能,就必须用...

FLINK流计算拓扑任务代码分析<二>

FLINK流计算拓扑任务代码分析<二>

首先 是 StreamExecutionEnvironment see = StreamExecutionEnvironment.getExecutionE...

FLINK流计算拓扑任务代码分析<一>

FLINK流计算拓扑任务代码分析<一>

我打算以 flink 官方的 例子 <<Monitoring the Wikipedia Edit Stream>> 作为示例,进行...

Ubuntu16.04安装CDH5.14.2

Ubuntu16.04安装CDH5.14.2

 一、安装cloudera manager(下文简称cm)    (一).环境及软件准备:       1.环境:Ubuntu16.04 desktop...

Ubuntu16下Hive 安装

Ubuntu16下Hive 安装

0.安装环境和版本 Ubuntu16,hadoop版本是2.7.2 ,选择Hive版本为  hive-2.1.17   1. Hi...

hive在客户机启动时出现的问题

hive在客户机启动时出现的问题

运行环境:一拖一分布式集群+客户端                 &nb...

了解MapReduce_2

了解MapReduce_2

再写MapReduce执行流程之前,首先先对MapReduce有一些了解: 1. 简介  MapReduce是一个计算框架,既然是做计算的框架,那么表现的...

从架构特点到功能缺陷,重新认识分析型分布式数据库

从架构特点到功能缺陷,重新认识分析型分布式数据库

写在前面 本文是分布式数据库的总纲文章的第一部分,主要探讨分析性分布式数据库的发展和技术差异;第二部分则是交易性数据库的一些关键特性分析。Ivan开始计划...

Hadoop分布式集群搭建_1

Hadoop分布式集群搭建_1

Hadoop是一个开源的分布式系统框架 一.集群准备     1. 三台虚拟机,操作系统Centos7,三台主机名分别为k...

User Login