收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
  • 焦点图说明文字 111

  • 焦点图说明文字 222

12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8804 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
06月26日

LeetCode.953-验证外语字典顺序(Verifying an Alien Dictionary)

分类:算法 | 超过 215 人围观 | 已有 0 人发表了看法

这是悦乐书的第364次更新,第392篇原创01看题和准备今天介绍的是LeetCode算法题中Easy级别的第226题(顺位题号是953)。在外语中,令人惊讶的是,他们也使用英文小写字母,但可能使用不同的顺序。字母表的顺序是小写字母的一些排列。给定用外语编写的单词序列以及字母表的顺序,当且仅当给定单词在这种外来语言中按字典排序时才返回true。例1:输入:words=[“hello”,“leetcode”],or...

查看全文 本文标签:
06月26日

ORA-04045: errors during recompilation/revalidation of LBACSYS.LBAC_EVENTS

分类:Oracle | 超过 68 人围观 | 已有 0 人发表了看法

ORA-04045: errors during recompilation/revalidation of LBACSYS.LBAC_EVENTS

使用orachk工具检查数据库实例的时候,发现报告里面有类似下面这样一些错误(最近有给Oracle10g应用补丁PSU10.2.0.5.180717,不清楚是这个产生的还是其他原因导致),使用脚本检查,发现有很多INVALID对象(具体参考[转载]—HealthCheckReportsProblem:Dependency$p_timestamp...

查看全文 本文标签:
06月26日

在 Ubuntu 开启 GO 程序编译之旅

分类:go | 超过 170 人围观 | 已有 0 人发表了看法

在 Ubuntu 开启 GO 程序编译之旅

本文将使用putty连接到一台阿里云Ubuntu16.04服务器,在其上安装go语言的编译环境,旨在呈现从安装到“你好,世界!”涉及的方方面面,希望完成这个过程无须觅它处。1.安装方式一使用apt-getapt-getinstallgolang-go执行完成之后,会把golang安装在这个位置:/usr/lib/go...

查看全文 本文标签:
06月25日

【剑指Offer】调整数组顺序使奇数位于偶数前面

分类:算法 | 超过 177 人围观 | 已有 0 人发表了看法

题目描述输入一个整数数组,实现一个函数来调整该数组中数字的顺序,使得所有的奇数位于数组的前半部分,所有的偶数位于数组的后半部分,并保证奇数和奇数,偶数和偶数之间的相对位置不变。解法1最直接的思路是再构建一个新数组,先遍历一遍原数组,把其中的奇数依次添加到新数组中,再遍历一遍原数组把其中的偶数依次添加到新数组中,时间复杂度为O(2n)。实现代码如下实现代码publicint[]reOrderArray2(int[]...

查看全文 本文标签:
06月25日

Oracle 10g&11g安装卸载Oracle Label Security

分类:Oracle | 超过 63 人围观 | 已有 0 人发表了看法

Oracle 10g&11g安装卸载Oracle Label Security

OracleLabelSecurit简介 OracleLabelSecurity是内置于数据库引擎中的过程与约束条件集,该数据引擎实施对在单个表或整个模式上的"行"级访问控制。要利用OracleLabelSecurity,需要创建一个或多个安全策略,其中每一个安全策略都包含一组标签。你可以用这些标签来标明哪些用户能够访问什么类型...

查看全文 本文标签:
06月25日

[转载]—Health Check Reports Problem: Dependency$ p_timestamp mismatch for VALID objects (文档 ID 781959.1)

分类:Oracle | 超过 57 人围观 | 已有 0 人发表了看法

HealthCheckReportsProblem:Dependency$p_timestampmismatchforVALIDobjects(文档ID781959.1)  APPLIESTO:OracleDatabase-EnterpriseEdition-Version9.2.0.5to12.1.0.2[Release9.2to12.1]In...

查看全文 本文标签:
06月25日

Redis 发布订阅

分类:Nosql | 超过 190 人围观 | 已有 0 人发表了看法

Redis 发布订阅

 Redis发布订阅(pub/sub)是一种消息通信模式:发送者(pub)发送消息,订阅者(sub)接收消息。pub即publish,推送。sub即subscribe,订阅。  订阅者订阅某个channel(频道),发布者将消息发布到Redis服务器,Redis服务器将消息推送给这个频道的订阅者。c...

查看全文 本文标签:
06月25日

Redis 事务

分类:Nosql | 超过 139 人围观 | 已有 0 人发表了看法

Redis 事务

Redis事务可以一次执行多个命令。 常用命令:multi   //开起一个事务,标记一个事务块的开始,multi即multipleexec  //执行事务块内的命令discard  //取消事务 使用步骤:...

查看全文 本文标签:
06月25日

python实现二叉树的遍历以及基本操作

分类:算法 | 超过 146 人围观 | 已有 0 人发表了看法

python实现二叉树的遍历以及基本操作

主要内容:二叉树遍历(先序、中序、后序、宽度优先遍历)的迭代实现和递归实现;二叉树的深度,二叉树到叶子节点的所有路径;首先,先定义二叉树类(python3),代码如下:classTreeNode:def__init__(self,x):self.val=xself.le...

查看全文 本文标签:
06月25日

golang之defer

分类:go | 超过 150 人围观 | 已有 0 人发表了看法

概述对于资源释放,有很多不同的实现方式,不同语言也有不同的惯用方法。C语言:手动管理Golang:deferPython:上下文管理器contexManagerC++:作用域和析构函数Rust:所有权和droptrait如果了解上面几种语言的童鞋应该知道,C语言资源管理是比较麻烦的,一旦资源使用过程中出错,就可能造成资源泄漏。Golang通过defer,...

查看全文 本文标签:
06月25日

Go - 环境安装

分类:go | 超过 181 人围观 | 已有 0 人发表了看法

Go - 环境安装

目录你好,Go语言环境安装目录结构命令开发工具学习网址小结你好,Go语言Go是一个开源的编程语言,它能让构造简单、可靠且高效的软件变得容易。因工作需要,准备入坑,先从环境安装开始,输出一个HelloWorld。环境安装目标安装完成并运行HelloWorld成...

查看全文 本文标签:
06月25日

通过发票编号取凭证编号,返回多行值,拼接到一起

分类:Oracle | 超过 89 人围观 | 已有 0 人发表了看法

functionGET_DOC_SEQUENCE_VALUE(P_INVOICE_NUMvarchar2)returnvarchar2isV_DOC_SEQUENCE_VALUEvarchar2(2000);cursorcur_doc(l_invoicevarchar2)isselectdoc_sequence_valuefromap_invoices_allwhereinvoic...

查看全文 本文标签:
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情