收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
  • 焦点图说明文字 111

  • 焦点图说明文字 222

12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8803 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
06月23日

Redis的下载安装

分类:Nosql | 超过 149 人围观 | 已有 0 人发表了看法

Redis的下载安装

 Redis官网只提供了Linux版,MicroSoft自己搞了个Windows版,可在GitHub下载:https://github.com/microsoftarchive/redis/releases    安装包方式   ...

查看全文 本文标签:
06月23日

Redis 简介

分类:Nosql | 超过 129 人围观 | 已有 0 人发表了看法

 Redis是一个开源的使用ANSIC语言编写、基于内存亦可持久化的日志型、Key-Value数据库,并提供了对多种编程语言的支持。 Redis的外围由一个键、值映射的字典构成,Redis提供五种数据类型:string,hash,list,set及zset(sortedset),所以Redis也被称为数据结构服务器。 redis是一个key-value存储系统。支持存储的value类...

查看全文 本文标签:
06月23日

靶形数独

分类:算法 | 超过 1652 人围观 | 已有 0 人发表了看法

靶形数独

题目描述洛谷(1074)小城和小华都是热爱数学的好学生,最近,他们不约而同地迷上了数独游戏,好胜的他们想用数独来一比高低。但普通的数独对他们来说都过于简单了,于是他们向Z博士请教,Z博士拿出了他最近发明的“靶形数独”,作为这两个孩子比试的题目。靶形数独的方格同普通数独一样,在 99 格宽×99 格高的大九宫格中...

查看全文 本文标签:
06月22日

数据结构-线性表

分类:算法 | 超过 1775 人围观 | 已有 0 人发表了看法

数据结构-线性表

一、线性表的定义  线性表(List):零个或多个数据元素的有限序列二、线性表的抽象数据类型ADT线性表(List)DataOperationlnitList(*L);//初始化操作,建立一个空的线性表ListEmpty(L);//若线性表为空,返回true,否则返回falseClearList(...

查看全文 本文标签:算法
06月22日

小木棍

分类:算法 | 超过 1700 人围观 | 已有 0 人发表了看法

小木棍

题目描述(洛谷1120)乔治有一些同样长的小木棍,他把这些木棍随意砍成几段,直到每段的长都不超过50,现在,他想把小木棍拼接成原来的样子,但是却忘记了自己开始时有多少根木棍和它们的长度。给出每段小木棍的长度,编程帮他找出原始木棍的最小可能长度。思路这题明显是一段一段拼接,要使用广搜或深搜,用广搜则必然导致时间浪费,当拼不上则应立即调整上一状态...

查看全文 本文标签:
06月22日

【OpenJ_Bailian - 2797】最短前缀

分类:算法 | 超过 1159 人围观 | 已有 0 人发表了看法

最短前缀Descriptions:一个字符串的前缀是从该字符串的第一个字符起始的一个子串。例如"carbon"的字串是:"c","ca","car","carb","carbo",和"carbon"。注意到这里我们不认为空串是字串,但是每个非空串是它自身的字串.我们现在希望能用前缀来缩略的表示单词。例如,"carbohydrate"通常用"carb"来缩略表示.现在给你一组单词,要求你找到唯一标识每个...

查看全文 本文标签:Go
06月22日

golang开发:环境篇(六) Go运行监控Supervisord的使用

分类:go | 超过 687 人围观 | 已有 0 人发表了看法

为什么要使用Supervisord17年第一次写Go项目的时候,用Go开发项目倒没没费多大劲,很快就开发完成了。到了在测试环境部署的时候,由于不知道有Supervisord这个软件,着实花了些功夫。总不能跟开发环境一样,直接执行编译生成的二进制文件吧,即使后台执行了,万一它挂了,没人知道,即使测试人员发现了,开发还得登录到服务器再次启动下这个二进制文件。很明显这个解决方案没有任何意义,后来就在网上找解决方案。然后,咨询Go开...

查看全文 本文标签:Go
06月21日

(8)《数据结构与算法》之查找算法

分类:算法 | 超过 652 人围观 | 已有 0 人发表了看法

(8)《数据结构与算法》之查找算法

在java中,我们常见的查找有四种顺序查找,也叫线性查找二分查找,也叫折半查找插值查找斐波那契查找我们将一一介绍着四种查找方式的思想以及程序的实现。1.顺序查找顺序查找的查找过程为:从数组的第一个元素开始,逐个将要查找的关键字和数组中的元素进行比较,若存在相等,则返回对应的下标。反之,若至最后一个元素,其关键字...

查看全文 本文标签:算法
06月21日

图数据库neo4j添加算法包

分类:Nosql | 超过 159 人围观 | 已有 0 人发表了看法

1.从https://github.com/neo4j-contrib/neo4j-graph-algorithms/releases下载相应版本jar包,放到    C:\Users\Administrator\.Neo4jDesktop\neo4jDatabases\database-数据库ID\installation-3.5.6\plugins目录下面2.在C:\Users\Administrator\.Neo4...

查看全文 本文标签:
06月21日

LeetCode.941-有效山形数组(Valid Mountain Array)

分类:算法 | 超过 823 人围观 | 已有 0 人发表了看法

这是悦乐书的第360次更新,第387篇原创01看题和准备今天介绍的是LeetCode算法题中Easy级别的第222题(顺位题号是941)。给定一个整数数组A,当且仅当它是一个有效的山形数组时返回true。A是一个山形数组,当且仅当:A.length>=3存在一些具有0<i<A.length-1的i,使得:A[0]<A[1]<...<A[i...

查看全文 本文标签:算法
06月21日

逆转单向链表看这一篇就够了【JAVA】

分类:算法 | 超过 1023 人围观 | 已有 0 人发表了看法

逆转单向链表看这一篇就够了【JAVA】

逆转单向链表逆转前:1->2->3->4->5->null逆转后:5->4->3->2->1->null个人博客地址:逆转单向链表方法一、循环迭代publicNodereverse(Nodehead){...

查看全文 本文标签:
06月20日

Oracle表空间满处理方式

分类:Oracle | 超过 278 人围观 | 已有 0 人发表了看法

一、查询表空间常规语句1.查询表空间使用情况SELECT Upper(F.TABLESPACE_NAME)        "表空间名",       D.TOT_GROOTTE_MB       ...

查看全文 本文标签:Oracle
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情