五分钟轻松了解Hbase面向列的存储

[置顶] 五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关...

OpenTSDB/HBase的调优过程整理

[置顶] OpenTSDB/HBase的调优过程整理

背景 过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。 我说这太抠了,寂寞哥说之前的TS...

亿级 ELK 日志平台构建部署实践

[置顶] 亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程...

HBase数据压缩编码探索

[置顶] HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,...

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备 1、集群规划...

Ambari2.6.2 HDP2.6.5 大数据集群搭建

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SP...

hadoop-2.7.7 HA完全分布式集群部署详解

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

1.Hadoop HA简介及工作原理Hadoop NameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNode HA的高可用...

可怕的黑暗料理之暗黑谷歌搜索神器

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器

1.暗黑谷歌的由来 有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件...

Oracle12c跨平台迁移之linux至windows

[置顶] Oracle12c跨平台迁移之linux至windows

近期应朋友邀请协助处理一起oracle数据库跨平台迁移的项目,需求为迁移centos 7.2 linux的oracle12.2数据库至windo...

python selenium cookie 转换成 request能用的cookie

python selenium cookie 转换成 request能用的cookie

cookies1={} for cookie in cookies: #注意 cookies为list类型 cookies1[cook...

MySQL学习笔记:基础应用总结

MySQL学习笔记:基础应用总结

一、什么是数据库?   1、数据库是按照数据结构来组织、存储和管理数据的仓库。每个数据库都提供API用于创建、访问、管理、搜索和复制所保存的数据。   ...

MySQL

MySQL

一、数据库的基本概念 1. 数据库:DataBase 简称:DB 2. 什么是数据库? 用于存储和管理数据的仓库 3. 数据库的特点:...

爬虫反爬系列之破解雪碧图反爬

爬虫反爬系列之破解雪碧图反爬

一、雪碧图 1.前言   我们都知道,HTTP 协议即超文本传输协议,是 Web 应用的基础,HTTP 协议又是基于 TCP 协议的,而 TCP 连接的...

03_K近邻算法

03_K近邻算法

  今天是2020年2月1日星期六,疫情延续,现在确诊人数达到了11821例,艰难困苦,玉汝于成,相信国家的力量!大家齐心协力干一件事,疫情会尽早结束的,武...

SpringBoot随笔-SpringBoot集成Druid

SpringBoot随笔-SpringBoot集成Druid

1.Druid是什么     Druid是Java语言中最好的数据库连接池之一,Druid能够提供强大的监控和扩展功能。...

Python网络爬虫四大选择器(正则表达式、BS4、Xpath、CSS)总结

Python网络爬虫四大选择器(正则表达式、BS4、Xpath、CSS)总结

前几天小编连续写了四篇关于Python选择器的文章,分别用正则表达式、BeautifulSoup、Xpath、CSS选择器分别抓取京东网的商品信息。今天小编...

理顺软件开发各个环节-12(开发管理-总体设计探讨)

理顺软件开发各个环节-12(开发管理-总体设计探讨)

5.4.3软件总体设计探讨   软件业务领域五花八门,用户需求千差万别,软件结构多姿多态,还有不同的操作系统,不同的计算机语言,公司的技术栈等等,决定了软...

遇到网站的反爬虫机制,那么我们应该来如何应对呢?

遇到网站的反爬虫机制,那么我们应该来如何应对呢?

  前言 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。 加企...

爬虫滑块计算图片之间的距离更加精确

爬虫滑块计算图片之间的距离更加精确

1.思路 原先图片匹配一般都是缺口匹配全图 优化点: 1.缺口图片匹配缺口所在图片那一行图片可以提高他识别率 2.移动后再进行2次匹配计算...

块存储 文件存储 对象存储

块存储 文件存储 对象存储

# 块存储文件存储对象存储### 简介主要是从访问方式的不同来区分的,之所以会有不同的访问方式是因为用户需求不同.对于块存储来说,数据是以块的形式来管理的,...

python一个列表根据某个元素前后分割

python一个列表根据某个元素前后分割

from itertools import groupbyresult = [list(g) for k, g in groupby(data, lambd...

User Login