收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » 2019年5月4日
12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8803 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
05月05日

【第五章】学习小结

分类:随笔 | 超过 189 人围观 | 已有 0 人发表了看法

本章我们学习了数据结构的一种——树。相比于前面的内容来说,树的构造更为抽象、难懂,也是我们所接触的第一种非线性数据结构。 **前序遍历voidPreOrderTravel(nodet[],intx){cout<<t[x].name<<"";if(t[x].lch!=-1)PreOrderTravel(t,t[x].lch);...

查看全文 本文标签:
05月05日

Git bash here基础命令行

分类:随笔 | 超过 1855 人围观 | 已有 0 人发表了看法

Git bash here基础命令行

今天来记录一下Gitbash命令,当个笔记来保存。前提:你已经在github上已经注册了账号。特别注意:括号内均为提示信息1、常用命令行工具: ①cmd  ②powershell   ③gitbash2、命令行常用命令(在gitbash上生效,部分在cmd...

查看全文 本文标签:Linux
05月05日

1586=计算组合数-java代码

分类:随笔 | 超过 1253 人围观 | 已有 0 人发表了看法

1importjava.util.Scanner;23publicclassMain{45publicstaticvoidmain(String[]args){6Scannerscanner=newScanner(System.in);7intn=scanner.nextInt();8for...

查看全文 本文标签:
05月04日

docker底层原理

分类:随笔 | 超过 832 人围观 | 已有 0 人发表了看法

docker底层原理

docker和kvm都是虚拟化技术,docker属于秒级启动的轻量高性能的虚拟化,它们的主要差别:一:docker与VM区别 VM(VMware)在宿主机器、宿主机器操作系统的基础上创建虚拟层、虚拟化的操作系统、虚拟化的仓库,然后再安装应用;Container(Docker容器),在宿主机器、宿主机器操作系统上创建Docker引擎,...

查看全文 本文标签:Linux
05月04日

Blog.3 | tree tree

分类:随笔 | 超过 918 人围观 | 已有 0 人发表了看法

Blog.3 | tree tree

一、树的实践应用(近两周系统地学习了树的基本操作知识。但是在完成实际应用的时候,发现知识的迁移能力还是有待提高)(1)树的遍历的选择,是否使用递归。对于listleaves(寻找叶子结点)的题目中,基于遍历方式的选择有不同的结果。(a)使用:递归——先序:前提:a是存储结点的数组,每个结点有两个成员,左右孩子的下标。typed...

查看全文 本文标签:
05月04日

游戏辅助分类

分类:随笔 | 超过 1766 人围观 | 已有 0 人发表了看法

 1.内存数据修改挂。通过修改游戏的内存数据,来达到破坏游戏及游戏平衡的目的 2.CALL调用挂。CALL是一个汇编的术语,意思可以理解为一个子程序的调用。在很多时候,C语言里的一个函数就表示一个CALL。一些CALL调用挂可以去调用游戏的一些函数,比如打坐,喝血,打怪,卖装备等,来实现一些自动挂机的功能,甚至他们会写一些自己的CALL来去HOOK游戏,使得游戏运行他们的CALL,而不是原有的CALL...

查看全文 本文标签:
05月04日

WeChat App Word

分类:随笔 | 超过 384 人围观 | 已有 0 人发表了看法

 chats:聊天;nwerun:微信运动contacts:联系人;nofficialaccounts:官方账号(公众号)discover:发现;vimoments:片刻(朋友圈动态);nscan:扫描;nshake:摇动;n,vi,vttopstories:头条新闻,热门动态people...

查看全文 本文标签:
05月04日

mybaits 错误 java.lang.NullPointerException Error instantiating null with invalid types () or values ()

分类:随笔 | 超过 520 人围观 | 已有 0 人发表了看法

mybaits 错误 java.lang.NullPointerException Error instantiating null with invalid types () or values ()

修好之后,错误不能重现了,所以忘记截图了,配置问题不知道怎么debug,看了好久都没用应该和这位大哥的错误相同,但是原因不同https://blog.csdn.net/likawei1314/article/details/65791837#comments我的错误原因是resultMap里的column和property都写反了,所以不停报空指针...

查看全文 本文标签:
05月04日

U盘的几种分类及格式

分类:随笔 | 超过 154 人围观 | 已有 0 人发表了看法

u盘常见的几种分类: 1、按u盘材质来分,可以分为金属u盘、塑料u盘、软胶u盘、皮革u盘、木质u盘、珠宝u盘等。这些主要是考虑u盘本身外壳所用材质的。 2、从u盘容量来分,就是8GB、16GB、32GB等,这个比较简单。 3、从品牌来分,那就是依各大厂商分产品来分了。例如金士顿、爱国者、朗科、宇瞻、PNY等。对于这种分类,u盘行业内人士可能比较清楚。因为对于很多厂商而言,u盘只是其下...

查看全文 本文标签:安全
05月04日

第五章题解

分类:随笔 | 超过 573 人围观 | 已有 0 人发表了看法

第五章 树和二叉树本章我们重点学习了树和二叉树的定义、二叉树的性质、存储结构、二叉树的先中后序遍历。简略的学习了树和森林的存储结构、遍历,大致讲解了哈夫曼树的基本感念。在学习过程中,建树和二叉树的遍历对我来讲比较难。建树可以用顺序存储也可以用二叉链表存储,二叉树的遍历可以用递归实现也可以用非递归实现。下面主要讲讲我在PTA做题过程的一些感想和思路。ListLeaves这道题的思路很简单: 构造二叉树的结...

查看全文 本文标签:
05月04日

2018-2019-2 网络对抗技术 20165202 Exp7 网络欺诈防范

分类:随笔 | 超过 320 人围观 | 已有 0 人发表了看法

2018-2019-2 网络对抗技术 20165202 Exp7 网络欺诈防范

博客目录一、实践目标二、实践内容简单应用SET工具建立冒名网站(1分)ettercapDNSspoof(1分)结合应用两种技术,用DNSspoof引导特定访问到冒名网站。(1.5分)请勿使用外部网站做实验三、实验中遇到的问题及解决四、基础问题回答五、实验总结...

查看全文 本文标签:
05月04日

python安装pyautogui

分类:随笔 | 超过 287 人围观 | 已有 0 人发表了看法

python安装pyautogui

一、问题在安装使用【pipinstallpyautogui】的时候会出现如下的错误:ERROR:Completeoutputfromcommandpythonsetup.pyegg_info:ERROR:Traceback(mostrecentcalllast):File"<string>",line1,...

查看全文 本文标签:Python
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情