收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » 2019年5月13日
12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8804 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
05月14日

1- 数据库基础快速入门

分类:随笔 | 超过 421 人围观 | 已有 0 人发表了看法

这次博客分享主要是以下几点:1.什么是数据库2.数据库管理软件3.什么是mysql4.MySQL数据库管理系统特点5.表结构与数据类型6.行,列7.主键与外键8.SQL语言我们进行不管是软件开发还是软件测试相关的职业的时候数据库必不可少;1.什么是数据,数据库-数据是数据库中存储的基本对象,种类包括文字,图形,图像,声音等。-数据库(database)是以某种有组织的方式存储的数据集合,保...

查看全文 本文标签:Oracle
05月14日

(三)堆排序

分类:随笔 | 超过 950 人围观 | 已有 0 人发表了看法

思想:每次构建一个最大堆,然后最大堆的顶为最大元素,然后将最大元素放置数组尾部。此为一个循环然后将剩余的N-1个元素再次构建最大堆,...以此类推publicclassSort3{publicstaticvoidmain(String[]args){int[]array={3,1,5,7,2,4,9,6,3};intlength=arra...

查看全文 本文标签:
05月14日

shell习题训练

分类:随笔 | 超过 1419 人围观 | 已有 0 人发表了看法

shell习题训练求2个数之和计算1-100的和将一目录下所有的文件的扩展名改为bak编译当前目录下的所有.c文件:打印root可以使用可执行文件数,处理结果:root'sbins:2306打印当前sshd的端口和进程id,处理结果:sshdPort&&pid:225412输出本机创建20000个目录所用的时间,处理结果:real0m3.367s...

查看全文 本文标签:Go
05月14日

014.统一建模语言UML

分类:随笔 | 超过 314 人围观 | 已有 0 人发表了看法

014.统一建模语言UML

1.UML的设计目的  UML是为了简化和强化现有的大量面向对象开发方法这一目的而开发的。  UML适用于各种软件开发方法、软件生命周期的各个阶段、各种应用领域以及各种开发工具,是一种总结了以往建模技术的经验并吸收当今优秀成果的标准建模方法。   2.UML的概念域UML的概念和模型可以分...

查看全文 本文标签:
05月13日

【Vue】学习

分类:随笔 | 超过 1635 人围观 | 已有 0 人发表了看法

安装vue.js。1、安装node.js,有自带的npm管理工具2、由于官网的链接在国外下载比较慢,可使用淘宝镜像(https://npm.taobao.org/)。  $npminstall-gcnpm--registry=https://registry.npm.taobao.org3、安装vue:全局安装->npminstallvue-cli-gj  npminstallwebpack-...

查看全文 本文标签:
05月13日

e.target resize()

分类:随笔 | 超过 884 人围观 | 已有 0 人发表了看法

e.target作用:获取触发当前事件的对象可以是事件绑定对象,也可是该对象的子对象(貌似具体到子对象)e.target和e.currentTarget区别e.currentTarget指的仅是注册(绑定)了事件监听器的对象,而e.target还可以指该对象里的子对象,也是触发这个事件的对象. JSON.parse(jsonobj)作用:js中用来将json字符串数据解析为js对象...

查看全文 本文标签:
05月13日

2018-2019-2学号20189230《移动平台应用程序开发实践》课程总结

分类:随笔 | 超过 1470 人围观 | 已有 0 人发表了看法

2018-2019-2学号20189230《移动平台应用程序开发实践》课程总结

每周作业链接汇总安装Linux系统,学习Linux操作基础:第一周学习任务:Java基础、语言基础、语句第二周学习任务:对象和类、继承、接口和抽象类、多态第三周学习任务:核心类、数组、错误处理、操作数字第四周学习任务:枚举、操作日期和时间、集合框架、泛型第五周学习任务:输入/...

查看全文 本文标签:安全
05月13日

我的python学习--Day6

分类:随笔 | 超过 1487 人围观 | 已有 0 人发表了看法

我的python学习--Day6

  今天和PM谈了半个小时,他是我很尊敬的人,因为我觉得他很真实也很务实,是个实事求是的人,和他的一番对话,让我更加看清了些现在这个工作的情况。他说,以他理解,在我们公司销售不像销售,fae更像一个销售……中间提到销售弄不清自己的产品有什么优势和客户那边项目情况框图等很大程度依赖fae。重点是,他和原厂fae谈过一番话:一个fae的职责应该专注于一个方向,一...

查看全文 本文标签:Python
05月13日

each()和offset()函数使用, e.target使用

分类:随笔 | 超过 835 人围观 | 已有 0 人发表了看法

each()作用:遍历对象和数组vararr=["a","b","c","d","e"];varobj={a:'one',b:'two',c:'three',d:'four',e:'five'};$.each(obj,function(key,value){console.log("Obj:"+key+'-'+value);})$.each(arr,function(...

查看全文 本文标签:
05月13日

分数运算中的现实含义

分类:随笔 | 超过 821 人围观 | 已有 0 人发表了看法

目录什么是分数分数的特征分数乘整数分数乘分数分数除整数整数除分数分数除分数什么是分数世间的任何物品,都可以看作为一份,也就是1。分数的特征所有分数所表示的现实含义就是,把一份平均分成了多少小份。分数乘整数分数乘分数分数除整数整数除分数分数除分数pass......

查看全文 本文标签:
05月13日

DevOps时代的软件过程改进探讨 杨振涛 云加社区 今天 作者:杨振涛,腾讯云TVP 本文从Jenkins,DevOps,云原生等视角探讨了软件过程改进在各个时代的挑战和价值,重新审视了SPI在软件开发和交付的效率和质量提升方面的意义

分类:随笔 | 超过 498 人围观 | 已有 0 人发表了看法

DevOps时代的软件过程改进探讨杨振涛云加社区今天  作者:杨振涛,腾讯云TVP 本文从Jenkins,DevOps,云原生等视角探讨了软件过程改进在各个时代的挑战和价值,重新审视了SPI在软件开发和交付的效率和质量提升方面的意义...

查看全文 本文标签:
05月13日

一、函数的初识、调用、返回值

分类:随笔 | 超过 390 人围观 | 已有 0 人发表了看法

一、今日内容大纲内容回顾函数初识函数的结构与调用函数的返回值函数的参数   二、今日内容函数初识写一个获取字符串总个数的代码,不能用len:s1='fjkdsfjdssudafurpojurojregreuptotuproq[t'#python没有lencount=0foriins1: ...

查看全文 本文标签:Python
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情