收藏本站 | RSS订阅大数据运维|云计算|攻防安全|AI|互联网时代守护先锋
你现在的位置:首页 » Linux
12月26日

[置顶] 五分钟轻松了解Hbase面向列的存储

分类:Hadoop | 超过 5506 人围观 | 已有 0 人发表了看法

五分钟轻松了解Hbase面向列的存储

说明:从严格的列式存储的定义来看,Hbase并不属于列式存储,有人称它为面向列的存储,请各位看官注意这一点。 行式存储 传统的数据库是关系型的,且是按行来存储的。如下图:其中只有张三把一行数据填满了,李四王五赵六的行都没有填满。因为这里的行结构是固定的,每一行都一样,即使你不用,也必须空到那里,而不能没有。来一张形象的图:不管你坐或不坐,...

查看全文 本文标签:Go
03月13日

[置顶] OpenTSDB/HBase的调优过程整理

分类:Hbase | 超过 6042 人围观 | 已有 0 人发表了看法

OpenTSDB/HBase的调优过程整理

背景过年前,寂寞哥给我三台机器,说搞个新的openTSDB集群。机器硬件是8核16G内存、3个146G磁盘做数据盘。我说这太抠了,寂寞哥说之前的TSDB集群运行了两年,4台同样配置的机器,目前hdfs才用了40%,所以前期先用着这三台机器,不够再加。于是我只好默默地搭好了CDH5、openTSDB(2.1版本,请注意此版本号)、bosun,并在2...

查看全文 本文标签:算法
02月02日

[置顶] 亿级 ELK 日志平台构建部署实践

分类:Hadoop | 超过 9727 人围观 | 已有 0 人发表了看法

亿级 ELK 日志平台构建实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级 ELK 系统。日志平台具体发展历程可以参考上篇 「从 ELK 到 EFK 演进」

废话不多说,老司机们座好了,我们准备发车了~~~

整体架构

亿级 ELK 日志平台构建部署实践

本篇主要讲工作中的真实经历,我们怎么打造亿级日志平台,同时手把手教大家建立起这样一套亿级ELK系统。日志平台具体发展历程可以参考上篇 「从ELK到EFK演进」废话不多说,老司机们座好了,我们准备发车了~~~整体架构整体架构主要分为4个模块,分别提供不同的功能Filebeat:轻量级数据收集引擎。基于原先Logstash-fowar...

查看全文 本文标签:安全
04月07日

[置顶] HBase数据压缩编码探索

分类:Hbase | 超过 5634 人围观 | 已有 0 人发表了看法

HBase数据压缩编码探索

摘要: 本文主要介绍了hbase对数据压缩,编码的支持,以及云hbase在社区基础上对数据压缩率和访问速度上了进行的改进。前言你可曾遇到这种需求,只有几百qps的冷数据缓存,却因为存储水位要浪费几十台服务器?你可曾遇到这种需求,几百G的表,必须纯cache命中,性能才能满足业务需求?你可曾遇到,几十M的小表,由于qps过高,必须不停的split,b...

查看全文 本文标签:安全
01月31日

[置顶] Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

分类:Hadoop | 超过 8737 人围观 | 已有 0 人发表了看法

Ambari2.7.3 和HDP3.1.0搭建Hadoop集群

一、环境及软件准备1、集群规划 hdp01/10.1.1.11hdp02/10.1.1.12hdp03/10.1.1.13hdp04/10.1.1.14hdp05/10.1.1.15ambariserver是否否否否ambariagent是是是是是namenode是是否否否datanode否否是是是resourcemanager是是否否否jou...

查看全文 本文标签:Oracle
04月18日

[置顶] Ambari2.6.2 HDP2.6.5 大数据集群搭建

分类:Hadoop | 超过 8804 人围观 | 已有 0 人发表了看法

Ambari2.6.2 HDP2.6.5 大数据集群搭建

Ambari2.6.2中HDFS-2.7.3YARN-2.7.3HIVE-1.2.1HBASE-1.1.2ZOOKEEPER-3.4.6SPARK-2.3.0注:本文基于root用户操作一、安装环境准备操作系统centos7.5hdc-data1:192.168.163.51hdc-data2:192.168.163.52hdc-da...

查看全文 本文标签:安全
05月23日

[置顶] hadoop-2.7.7 HA完全分布式集群部署详解

分类:Hadoop | 超过 7529 人围观 | 已有 0 人发表了看法

hadoop-2.7.7 HA完全分布式集群部署详解

1.HadoopHA简介及工作原理HadoopNameNode官方开始支持HA集群默认是从2.0开始,之前的版本均是不支持NameNodeHA的高可用的。1.1HadoopHA简介Hadoop-HA集群运作机制介绍HA即高可用(7*24小时不中断服务)实现高可用最关键的是消除单点故障分成各个组件的HA机制——HDFS的HA、YARN的HA...

查看全文 本文标签:Hadoop
05月23日

[置顶] 可怕的黑暗料理之暗黑谷歌搜索神器shodan

分类:Safe | 超过 7731 人围观 | 已有 0 人发表了看法

1.暗黑谷歌的由来有这么一款搜索引擎,它一刻不停的在寻找着所有和互联网关联的PLC、摄像头、红绿灯、打印机、路由器、交换机、服务器、数据库等等各种软硬件服务设施。它就是shodan,那么shodan到底是什么呢?怎么会有如此大的魔力?首先,Shodan是一个搜索引擎,但它与Google这种搜索网址的搜索引擎不同,Shodan不是在网上搜索网址,而是直接进入互联网探索其背后的信息。Shodan真正值得注意的能力就是能找...

查看全文 本文标签:安全
05月19日

Vultr主机绑定域名

分类:Linux | 超过 672 人围观 | 已有 0 人发表了看法

Vultr主机绑定域名

1.在腾讯云上注册域名然后,域名实名认证 2.Vultr主机购买(看我之前写的:手把手教你如何自己搭梯子)然后会获取到一个服务器IP地址 3.绑定域名与IP点解,解析后会弹出让你输入IP地址,此时输入2中获取的IP就可以绑定绑定后:4.然后你就可以正常访问这个网址了 ...

查看全文 本文标签:
05月19日

Linux下设置root密码

分类:Linux | 超过 1147 人围观 | 已有 0 人发表了看法

如下面的代码所示:sudopasswd[sudo]geeksong的密码:输入新的UNIX密码:重新输入新的UNIX密码:passwd:已成功更新密码更性的unix密码就是root的密码,然后我们可以切换到root用户进行登陆,输入suroot来到root的用户界面:suroot登陆成功,得解。命令行之后的$变成了#这样就切换回root目录啦!...

查看全文 本文标签:Linux
05月19日

Linux下用户管理:创建用户指定密码

分类:Linux | 超过 549 人围观 | 已有 0 人发表了看法

Linux下用户管理:创建用户指定密码

首先我们来了解下Linux下用户管理的概念:如上图所示,左边的一列表示用户名,中间的一列表示用户组,最右边的一列表示的是家目录。用户名我们这里处于简单就,添加了root,xm,xh三个用户。用户组和家目录则是Linux设计者为了方便大家使用从而创建的概念,每一个用户都必须归属于一个组,一个用户可以归属于多个组。家目录则是用户登录时会来到目录/home下所...

查看全文 本文标签:Linux
05月19日

YII2数据库操作出现类似Database Exception – yiidbException SQLSTATE[HY000] [2002] No such file or director

分类:Linux | 超过 1206 人围观 | 已有 0 人发表了看法

参考文章:https://blog.csdn.net/zqtsx/article/details/41845511我的系统时Ubuntu18使用上面的方法时发现,没有MySQL.socket,然后谷歌如apch何重建socket,找了半天感觉都是同一篇文章的不同转载,哎。。。  运行:phpinfo()只有MySQL的3个开发人,连上文的MySQLSupport也没有 后来,想了一下,自己安装了Apache...

查看全文 本文标签:Mysql
05月18日

文件浏览:ls&file

分类:Linux | 超过 603 人围观 | 已有 0 人发表了看法

文件浏览:ls&file

文件浏览主要完成的功能是列出当前目录或指定目录下文件的文件名称以及一些基本的资料。Linux的命令是区分大小写的。1. ls:列出当前目录(默认)或指定目录下所有文件,并按字典序排序  语法:ls[参数]…[文件]…  ls-a:不隐藏任何一“.”开头的文件  ls-b:不隐藏任何以“~”结尾的文件  l...

查看全文 本文标签:Linux
05月18日

linux-Redhat7 windows物理机与虚拟机设置共享目录

分类:Linux | 超过 1335 人围观 | 已有 0 人发表了看法

linux-Redhat7 windows物理机与虚拟机设置共享目录

一                  windows物理机与虚拟机设置共享目录1.1       WM...

查看全文 本文标签:Linux
05月18日

Linux系统的几种加密

分类:Linux | 超过 319 人围观 | 已有 0 人发表了看法

Linux系统的几种加密

启动流程:  BIOS——》MBR(主引导记录,找到系统在哪个分区)——》bootloader(grub)——》kernel(内核)——》进入启动级别init硬盘的最小读取单位是一个扇区,一个扇区大小是512字节查看操作系统的版本:cat/etc/redhat-release查看内核版本:uname-r查看内核信息:una...

查看全文 本文标签:安全
05月17日

Liunx-ls命令

分类:Linux | 超过 746 人围观 | 已有 0 人发表了看法

Liunx-ls命令

ls:查看目录及文件1.列出当前目录中所有的子目录和文件。ls2.列出目录下的所有文件(包含隐**件)ls-a 3.列出文件的详细信息(包括权限、所有者、文件大小等)ls-l(别名ll) 4.列出当前目录中所有以“install.log”开头的详细内容...

查看全文 本文标签:
05月17日

一行命令杀掉defunct进程

分类:Linux | 超过 1000 人围观 | 已有 0 人发表了看法

一行命令杀掉defun进程今天在杀掉defunc过程中一直搞不完,索性写一行命令,注意先看懂谨慎使用ps-ef|grepdefun|awk'{print"ps-ef|egrep\47"$2"|"$3"\47"}'|sh|sort-r|awk'{print"kill-9"$2}'|sh注意该命令执行会退出当前shell...

查看全文 本文标签:Linux
05月17日

ubantu32位 linux下hexedit的下载安装

分类:Linux | 超过 195 人围观 | 已有 0 人发表了看法

ubantu32位 linux下hexedit的下载安装

Hexedit软件介绍:hexedit是一个开源的完全免费的命令行软件,可用于在任何GNU/Linux操作系统下以十六进制和ASCII(美国信息交换标准代码)格式查看和编辑文件。下载:在softpedia网站上找到Linux下hexedit的安装包:有32位和64位的,我用的是32位直接运行:将压缩包解压后,进入到usr/bi...

查看全文 本文标签:Linux
05月17日

Linux下 vim代码编译器的使用

分类:Linux | 超过 1603 人围观 | 已有 0 人发表了看法

首先在命令行模式下输入代码:vimok.c创建c文件如果发现vim没有被安装的话,输入以下代码对vim进行安装:sudoaptinstallvim安装完毕之后再输入第一行代码,之后进入程序编译界面,输入我们需要的程序,例如:#include<stdio.h>intmain(){printf("我是一个大傻子");}然后按下键盘Esc,再输入wq:这...

查看全文 本文标签:Linux
05月17日

Linux(ubuntu) 一行代码搞定查看文件目录

分类:Linux | 超过 1434 人围观 | 已有 0 人发表了看法

ls命令:•ls是英文单词list的简写,其功能为列出目录的内容,是用户最常用的命令之一,类似于DOS下的dir命令ls命令之后加各种参数的作用:ls-a显示指定目录下所有子目录与文件,包括隐藏文件ls-l以列表方式显示文件的详细信息ls-l-h配合-l以人性化的方式显示文件大小...

查看全文 本文标签:Linux
微信公众号
  • 关注微信公众号
«   2019年5月   »
12345
6789101112
13141516171819
20212223242526
2728293031
网站分类
文章归档
网站收藏
友情链接
广告赞助
  • 点击查看详情