收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » 2019年5月16日
12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8803 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
05月16日

java中的标识符

分类:随笔 | 超过 885 人围观 | 已有 0 人发表了看法

程序员自己定义的名称,例如类名,方法名,变量等等标识符命名的规则1、只能由字母(a-z,A-Z),数字(0-9),下划线(_)和美元符号($)组成 2、不能以数字开头 3、不能与关键字重名 4、严格区分大小写 类命名规范首字母大写,后面每个单词首字母大写(大驼峰式)。方法命名规范首字母小写,后面每个单词首字母大写(小驼峰式)。printNum...

查看全文 本文标签:
05月16日

go语言面向对象之方法

分类:随笔 | 超过 1747 人围观 | 已有 0 人发表了看法

1、实现方法packagemainimport"fmt"//在面向对象编程中,一个对象其实就是一个简单的值或者一个变量,在这个//对象中包含一些函数//这种带有接受者的函数,我们称之为方法,本质上,一个方法//则是一个和特殊类型关联的函数//定义一个方法,实现两个数相加typemyintint//传统的定义方式,面向过程的方式定义函数funcAdd(a,...

查看全文 本文标签:Go
05月16日

切实解决socket连接掉线检测

分类:随笔 | 超过 1377 人围观 | 已有 0 人发表了看法

原文:切实解决socket连接掉线检测版权声明:欢迎转载,但是请保留出处说明https://blog.csdn.net/lanwilliam/article/details/51698807新公司在做物联网,要做与modbus设备的通讯服务。在过程中除了研究modbus协议外,最麻烦的就是设备在线状态的检测问题。Socket本身无法很好的捕获连接断开事件,或者说根本没这功能。总不能每次发生数据通讯时...

查看全文 本文标签:
05月16日

MariaDB -- 数据类型

分类:随笔 | 超过 1674 人围观 | 已有 0 人发表了看法

MariaDB -- 数据类型

Mariadb的数据类型MariaDB数据类型可以分为数字,日期和时间以及字符串值。使用数据类型的原则:够用就行, 尽量使用范围小的,而不用大的常用的数据类型整数:int,bit小数:decimal           ...

查看全文 本文标签:
05月16日

C#获得网络连接信息 IPGlobalProperties

分类:随笔 | 超过 630 人围观 | 已有 0 人发表了看法

C#获得网络连接信息 IPGlobalProperties

原文:C#获得网络连接信息IPGlobalPropertiesIPGlobalProperties提供有关本地计算机的网络连接的信息。此类提供有关本地计算机的网络接口和网络连接的配置和统计信息可以获取本机TCPUDP丢包发包等数据。此类提供的信息与IPHelperAPI函数提供的信息相似。有关IPHelper...

查看全文 本文标签:
05月16日

Regression

分类:随笔 | 超过 1499 人围观 | 已有 0 人发表了看法

Regressionhttps://www.merriam-webster.com/dictionary/regressDefinitionofregress (Entry1of2)1a:anactortheprivilegeofgoingorcomingbackb:reentrysense12:movemen...

查看全文 本文标签:Go
05月16日

使用Dynamics 365 CE Web API查询数据加点料及选项集字段常用查询

分类:随笔 | 超过 1127 人围观 | 已有 0 人发表了看法

使用Dynamics 365 CE Web API查询数据加点料及选项集字段常用查询

微软动态CRM专家罗勇,回复336或者20190516可方便获取本文,同时可以在第一间得到我发布的最新博文信息,followme.紧接上文:配置Postman通过OAuth2implicitgrant获取Dynamics365CEOnline实例的AccessToken 。我这用来执行一个查询语句如下:{{webapi...

查看全文 本文标签:
05月16日

【转载】Session对象的作用以及常见属性

分类:随笔 | 超过 1830 人围观 | 已有 0 人发表了看法

Session对象是Asp.Net应用程序中非常重要的一个内置对象,Session是指用户从打开浏览器访问服务器到关闭浏览器之间的会话状态,在一个会话期间,服务器会自动分配一个标识SessionId。Session可以存储用户访问服务器的一些传递资料信息。Session和Application一样都是全局性作用的,区别在于Application对象针对于所有的用户,而Session对象针对于某一个用户。Session对象可以存储任何...

查看全文 本文标签:
05月16日

Navicat介绍及pymysql模块

分类:随笔 | 超过 972 人围观 | 已有 0 人发表了看法

内容回顾selectdistinct字段1,字段2,。。。from表名where分组之前的过滤条件groupby分组条件having分组之后过滤条件orderby排序字段1asc,排序字段2desclimit5,5as语法中给某个查询结果起别名的时候需要把查询语句中的分...

查看全文 本文标签:Go
05月16日

Java中的关键字

分类:随笔 | 超过 354 人围观 | 已有 0 人发表了看法

Java中的关键字

关键字具有特殊含义的字,系统保留的字就是关键字例如publicclassstaticvoid他们用来表示一种数据类型,或者表示程序的结构等,关键字不能用作变量名、方法名、类名、包名和参数。 ...

查看全文 本文标签:
05月16日

用bootstrap写一个登陆页

分类:随笔 | 超过 216 人围观 | 已有 0 人发表了看法

用bootstrap写一个登陆页

<divclass="container"><pclass="text-centermarginTop35">后台管理系统</p><pclass="text-centermarginTop20">会议管理系统</p>...

查看全文 本文标签:
05月16日

Java的编译与运行

分类:随笔 | 超过 557 人围观 | 已有 0 人发表了看法

编译:是指将我们编写的Java源文件翻译成JVM认识的.class文件,在这个过程中,javac编译器会检查我们所写的程序是否有错误,有错误就会提示出来,如果没有错误就会编译成功。运行:是指将.class文件交给JVM去运行,此时JVM就会去执行我们编写的程序了...

查看全文 本文标签:
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情