收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » 2019年5月15日
12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8804 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
05月16日

键盘输入三个数,实现从小到大排序

分类:随笔 | 超过 408 人围观 | 已有 0 人发表了看法

 //导包importjava.util.Scanner;publicclassSort{  publicstaticvoidmain(String[]args){    //创建键盘输入对象    Scannersc=newScanner(System.in);        //接收键盘输入的三个整数    System.out.println("请输入第...

查看全文 本文标签:
05月16日

Minikube-Kubernetes本地环境进行开发

分类:Linux | 超过 355 人围观 | 已有 0 人发表了看法

Minikube-Kubernetes本地环境进行开发使用Minikube启动Minikube#启动minkubestart#检查状态minikubestatushost:Runningkubelet:Runningapiserver:Runningkubectl:CorrectlyConfigured:pointingtominikube-vmat192.168.99.100...

查看全文 本文标签:Linux
05月15日

wordpress添加index页面跳转链接

分类:随笔 | 超过 1498 人围观 | 已有 0 人发表了看法

wordpress添加index页面跳转链接

1.制作page页面1.1在themes下的主题目录新建一个page页面 1.2在wordpress后台新建页面跟在目录页面中相同名字的页面文件1.3复制后台页面中的古定链接 1.4在index.php文件的href属性中添加链接 ...

查看全文 本文标签:
05月15日

LeetCode 229. 求众数 II JAVA

分类:随笔 | 超过 1736 人围观 | 已有 0 人发表了看法

题目:给定一个大小为 n 的数组,找出其中所有出现超过 ⌊n/3⌋ 次的元素。说明: 要求算法的时间复杂度为O(n),空间复杂度为O(1)。示例 1:输入:[3,2,3]输出:[3]示例2:输入:[1,1,1,3,3,2,2,2]输出:[1,2]解题:classSolution{publicList&l...

查看全文 本文标签:算法
05月15日

2019-05-15 java学习日记

分类:随笔 | 超过 1199 人围观 | 已有 0 人发表了看法

day5学习笔记数组数组是一个容器,为了存储同种数据类型的多个值,是存储同一种数据类型多个元素的集合,数组即可以存储基本数据类型,也可以存储引用数据类型。 数组的定义格式:数据的初始化动态初始化,只指定长度,由系统给出初始化值。整数类型:byte,short,int,long默认初始化值的都是0。浮点类型:float,double默认初始化值都是0.0。布尔类型:boolean默认初始值false;...

查看全文 本文标签:
05月15日

羽毛球模拟比赛

分类:随笔 | 超过 792 人围观 | 已有 0 人发表了看法

羽毛球模拟比赛

羽毛球比赛计分规则:1.21分制,3局2胜为佳 2.每球得分制 3.每回合中,取胜的一方加1分 4.当双方均为20分时,领先对方2分的一方赢得该局比赛 5.当双方均为29分时,先取得30分的一方赢得该局比赛 6.一局比赛的获胜方在下一局率先发球代码如下:from...

查看全文 本文标签:
05月15日

github下载慢的问题

分类:随笔 | 超过 1478 人围观 | 已有 0 人发表了看法

1.修改HOSTS文件:在“C:\Windows\System32\drivers\etc”下的HOSTS文件,添加以下地址: 151.101.44.249github.global.ssl.fastly.net192.30.253.113github.com103.245.222.133assets-cdn.github.com23.235.47.133assets-cdn.github...

查看全文 本文标签:
05月15日

mysql查询数据库中每一张表的内存大小

分类:随笔 | 超过 415 人围观 | 已有 0 人发表了看法

mysql查询数据库中每一张表的内存大小

SELECTTABLE_NAME,DATA_LENGTH+INDEX_LENGTH,TABLE_ROWS,concat(round((DATA_LENGTH+INDEX_LENGTH)/1024/1024,2),'MB')asdataFROMinformation_schema.tablesWHERETABLE_SCHEMA='test'O...

查看全文 本文标签:Mysql
05月15日

MyQL的行转列,列转行

分类:随笔 | 超过 733 人围观 | 已有 0 人发表了看法

转载至:https://www.cnblogs.com/xiaoxi/p/7151433.html 一、行转列 即将原本同一列下多行的不同内容作为多个字段,输出对应内容。建表语句 DROPTABLEIFEXISTStb_score;CREATETABLEtb_score(   idINT(11)NOTNULLauto_incre...

查看全文 本文标签:
05月15日

Java基础day01-标识符

分类:随笔 | 超过 1637 人围观 | 已有 0 人发表了看法

标识符1.定义  在程序中我们自己定义的内容。例如:类名,方法名,变量名等。2.命名规则(硬性要求)  (1)字母,数字,美元符号,下划线组成;  (2)不能是数字开头;  (3)不能是Java关键字。3.命名规范(软性建议)  (1)类名:首字母大写,后面每个单词首字母大写(大驼峰)  (2)方法名:首字母小写,后面每个单词首字母大写(小驼峰)  (3)变量名:首字母小写,后面每个单词首字母大写...

查看全文 本文标签:
05月15日

Flyme密码验证策略升级,忘记锁屏密码及「关机密码」功能

分类:随笔 | 超过 854 人围观 | 已有 0 人发表了看法

Flyme密码验证策略升级,忘记锁屏密码及「关机密码」功能

 手机里有很多需要用到密码的地方,比如「手机密码」、「文档锁定区」、「应用加密」、「隐私模式」。忘记密码可是一件麻烦事,以前只能通过清除数据或格式化存储盘来解决。现在有了「关联魅族账号」功能,这些功能的密码都可以和「魅族账号」相关联,也为找回密码提供了便利。在本次稳定版更新中,我们优化了「锁屏密码」与「魅族账号」的验证策略。当你忘记...

查看全文 本文标签:安全
05月15日

ubuntu 18.04 vcs2016 安装记录

分类:随笔 | 超过 537 人围观 | 已有 0 人发表了看法

ubuntu18.04  VCS2016.6  scl2017资源地址http://www.ictown.com/forum.php?mod=viewthread&tid=195973&highlight=vcs 友情提示 虚拟机硬盘空间20G不够 --  对于新安装的ubuntu18.04系统,获取mac地址,和hostna...

查看全文 本文标签:Linux
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情