收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
  • 焦点图说明文字 111

  • 焦点图说明文字 222

12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8804 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
07月01日

LeetCode.977-排序数组的平方(Squares of a Sorted Array)

分类:算法 | 超过 151 人围观 | 已有 0 人发表了看法

这是悦乐书的第369次更新,第397篇原创01看题和准备今天介绍的是LeetCode算法题中Easy级别的第231题(顺位题号是977)。给定一个整数数组A按有序递增顺序排序,返回每个数字的平方,也按有序递增顺序返回。例如:输入:[-4,-1,0,3,10]输出:[0,1,9,16,100]输入:[-7,-3,2,3,11]输出:[4,9,9,49,121]注意:1<=A.lengt...

查看全文 本文标签:
07月01日

Oracle数据库----查询

分类:Oracle | 超过 52 人围观 | 已有 0 人发表了看法

--笛卡尔集selectempno,ename,员工表.deptno,部门表.deptno,dnamefrom部门表,员工表;--添加合适的条件,可以避免笛卡尔集,从而得到正确的多表查询记录selectempno,ename,员工表.deptno,部门表.deptno,dnamefrom部门表,员工表where部门表.deptno=员工表.deptno;--查询员工信息,要求显示:员工号,姓名...

查看全文 本文标签:
06月30日

链表反转&交换链表结点

分类:算法 | 超过 176 人围观 | 已有 0 人发表了看法

链表反转&交换链表结点

leetcode链表反转链接要求摘要:反转一个单链表输入:1->2->3->4->5->NULL输出:5->4->3->2->1->NULL做法是考虑把链表中结点的next指向它的上一个结点,以此来进行反转。/***Definitionforsingly-lin...

查看全文 本文标签:
06月30日

分类:算法 | 超过 143 人围观 | 已有 0 人发表了看法

栈

栈的英文(stack)栈是一个先入后出的有序列表栈是限制性表中元素的插入和删除只能在线性表的同一端进行的一种特殊线性表。允许插入和删除的一端,为变化的一端,称为栈顶(Top),宁一端为固定的一端,称为栈底(Bottom)根据栈的定义可知,最先放入栈中元素在栈底,最后放入的元素在栈顶,而删除元素刚好相反,最后放入的元素最先删除,最先放入的元素最后删...

查看全文 本文标签:
06月30日

乘方快速幂

分类:算法 | 超过 153 人围观 | 已有 0 人发表了看法

乘方快速幂

乘方快速幂,是为了解决a^b次方普通计算方法太慢的问题。计算a的b次方,普通的for循环求法如下(O(n)):1inta(intx,intn)2{3intt=1;4for(inti=1;i<=n;i++)5{6t=t*x;7}8...

查看全文 本文标签:
06月30日

LeetCode.976-周长最大的三角形(Largest Perimeter Triangle)

分类:算法 | 超过 189 人围观 | 已有 0 人发表了看法

这是悦乐书的第368次更新,第396篇原创01看题和准备今天介绍的是LeetCode算法题中Easy级别的第230题(顺位题号是976)。给定正长度的数组A,返回具有非零区域的三角形的最大周长,由这些长度中的3个组成。如果不可能形成任何非零区域的三角形,则返回0。例如:输入:[2,1,2]输出:5输入:[1,2,1]输出:0输入:[3,2,3,4]输出:10输入:[3,6,2,3]输出:8注意:...

查看全文 本文标签:
06月30日

Oracle数据库常用的脚本命令(一)

分类:Oracle | 超过 57 人围观 | 已有 0 人发表了看法

--连接数据库的命令connect,用于切换连接用户,简写形式conn--语法格式:conn用户名/密码connyanln/yanln--显示当前登录的用户showuser--执行操作系统的命令hostmkdird:\testOracle--导出记录到文本spoold:\testOracle\test.txtselect*frombook;spooloff--清屏clearscreen-...

查看全文 本文标签:
06月30日

Go基础编程实践(二)—— 类型转换

分类:go | 超过 147 人围观 | 已有 0 人发表了看法

booltostringstrconv包的FormatBool函数用于将bool转为stringpackagemainimport("fmt""strconv")funcmain(){isNew:=trueisNewStr:=strconv.FormatBool(isNew)//message:="Purchaseditemis"+i...

查看全文 本文标签:
06月30日

不一样的go语言-玩转语法之一

分类:go | 超过 166 人围观 | 已有 0 人发表了看法

不一样的go语言-玩转语法之一

  这段时间为俗事所累,疲以应付,落下了不少想法,错过了更新的日子。这个专题开始之际,已经准备了不下十几个主题,而在写作的过程中,又有新想法与主题涌现出来。未来预计想写写的内容主要包括:玩转语法系列Context的来龙去脉函数、闭包与范畴论的关系线程与协程之争通道的那些事  今天的玩转语法系列,先起个头,调子稍微低一...

查看全文 本文标签:
06月30日

直接插入排序的两种做法

分类:算法 | 超过 156 人围观 | 已有 0 人发表了看法

直接插入排序的两种做法

可能很多人不会留意到这个问题,今天恰好碰到了,然后来稍微讨论一下 直接插入排序应该是很多数据结构与算法书里第一个讲的排序算法,算法的描述是这样的:把待排序列视作两段,一段是已排序列,一段是未排序列。每一趟排序时,为未排序列的首位在已排序列中进行查找(因为是直接插入排序,所以这里特指逐个比较)其合适的位置,然后将其插入(插入的过程中伴随着...

查看全文 本文标签:
06月30日

在 Windows 中编译 Github 中的 GO 项目

分类:go | 超过 185 人围观 | 已有 0 人发表了看法

在 Windows 中编译 Github 中的 GO 项目

1、相关软件与环境准备1.1GO安装下载地址,https://studygolang.com/dl,选择Windows版,本文安装到D:\Go1.2LiteIDE安装下载地址,http://liteide.org/cn/download/ 可以找到去下载的地方。本文下载的是 https://githu...

查看全文 本文标签:
06月29日

DQL---条件查询、单行函数、多行函数、分组函数、数据类型

分类:Oracle | 超过 74 人围观 | 已有 0 人发表了看法

DQL---条件查询、单行函数、多行函数、分组函数、数据类型

一、DQL1、基本规则:  (1)对于日期型数据,做*,/运算不合法,可以进行+,-运算。比如给日期加一天或减一个月,结果仍为一个日期。两个日期间只能为减法,返回两个日期相差的天数,两个日期间做加法没任何意义。  (2)包含空值(null)的数学表达式计算结果均为空值。  (3)给字段取别名时,别名使用双引号括起来(根据双引号里...

查看全文 本文标签:
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情