五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

day04 list tuple (补)

day04 list tuple (补)

今日内容: 1. 列表 2. 列表的增删改查 3. 列表的嵌套 4. 元组和元组嵌套 5. range   列表 列表: 能装对象...

Hive如何处理小文件问题?

Hive如何处理小文件问题?

一、小文件是如何产生的 1.动态分区插入数据,产生大量的小文件,从而导致map数量剧增。 2.reduce数量越多,小文件也越多(reduce的个数和输...

【Python3爬虫】网易云音乐爬虫

【Python3爬虫】网易云音乐爬虫

此次的目标是爬取网易云音乐上指定歌曲所有评论并生成词云   具体步骤: 一:实现JS加密  找到这个ajax接口没什么难度,问题...

scrapy中pipeline的一点综合知识

scrapy中pipeline的一点综合知识

初次学习scrapy ,觉得spider代码才是最重要的,越往后学,发现pipeline中的代码也很有趣, 今天顺便把pipeline中三种储存方法写下来...

django中的分页器组件

django中的分页器组件

目录 django的组件-分页器 引入分页器 分页器demo 创建数据库模型 url控...

mysql查询表中最小可用id值

mysql查询表中最小可用id值

今天在看实验室的项目时,碰到的一个问题,。先把sql语句扔出来 // 这条语句在id没有1时,不能得到正确的查询结果。 select min(id+1)...

python摸爬滚打之day05----字典

python摸爬滚打之day05----字典

1、字典介绍   1.1  结构:  {key1: value1, key2: value2, ....} ,由很多键值对构成.&nb...

MySQL字符集设定与查询

MySQL字符集设定与查询

一、字符集设定 MySQL数据库允许对服务器、数据库、数据表、数据列级别的字符集作出互不影响的设定。 1、对服务器字符集设定是通过配置文件中选项char...

Go入门指南

Go入门指南

第一部分:学习 Go 语言 第1章:Go 语言的起源,发展与普及 1.1 起源与发展 1.2 语言的主要...

修改并编译golang源码

修改并编译golang源码

最近为了做Hyperledger Fabric国密改造,涉及到了golang源码的改动。特将操作过程整理如下,以供参考: golang的源码安装其实比...

快速排序,对于相同元素的优化,c++

快速排序,对于相同元素的优化,c++

#include<iostream>using namespace std; void middl(int &p,int &q...

http与https区别

http与https区别

        超文本传输协议HTTP协议被用于在Web浏览器和网站服务器之间传递信息,HTTP协议以明文方式发送内...

User Login