虚拟化容器,大数据,DBA,中间件,监控。
16 11月
lvs+keepalived部署k8s v1.16.4高可用集群

一、部署环境1.1 主机列表主机名 Centos版本 ip docker version flannel version Keepalived version 主机配置 备注 lvs-keepalived01 7.6.18...

作者:admin|分类:容器虚拟化|浏览:575
15 11月
基于云服务器docker搭建zookeeper集群

出现前言这里记录着本人采用云服务器搭建zookeeper集群的一些步骤及问题。提示:以下是本篇文章正文内容,下面案例可供参考一、搭建docker环境1.通过云服务自带的镜像直接使用。2.使用官方安装脚本自动安装。示例:curl -fsSL https://...

作者:admin|分类:大数据|浏览:738
15 11月
安装elasticsearch集群

认识elasticsearch最近在做一个关于spark整合Elasticsearch的项目,闲下在自己机器上安装了一下elasticsearch集群。关于elasticserarch,这里简单做一下介绍:它 是一个实时分布式搜索和分析引擎。它让你以前所未...

作者:admin|分类:大数据|浏览:687
15 11月
基于Tableau探索分析世界银行提供的关于科学技术的数据

要求对 CSE512: Data Visualization 完成探索性数据分析。内容数据选择数据来源:1960-2017年世界银行的数据。世界银行通过气候变化、经济、教育、环境、两性平等、卫生和科学和技术等指标跟踪全球人类发展,世界银行提供的数据包括有:...

作者:admin|分类:大数据|浏览:733
15 11月
Hadoop 保姆级教程 - 从安装到实践

课题背景经过一学期的大数据导论学习后,我们突然接到了结业大作业——进行一次大数据分析项目的通知。刚刚学习了一些大纲类型的知识的我们自然是不知所措的,经过资料查阅后我们决定通过虚拟机搭建Hadoop集群进行伪分布式计算完成该项目。然后就开始了安装了20次虚拟...

作者:admin|分类:大数据|浏览:803
15 11月
部署kibana分析系统并连接elasticsearch集群展现索引数据(八)

部署kibana分析系统并连接es展现索引数据1.kibana分析系统简介Kibana是一个开源的分析与可视化平台,设计出来用于和Elasticsearch一起使用的。你可以用kibana搜索、查看存放在Elasticsearch中的数据。Kibana与E...

作者:admin|分类:大数据|浏览:722
15 11月
使用filebeat简单收集多个nginx应用服务器日志(一)

使用filebeat简单收集日志1.filebeat原理与介绍filebeat收集日志的原理类似于tail -f命令,等待应用日志产生后,每隔30s将日志进行收集,收集完成后存放在es的索引库中,最后展示在kibana上当filebeat关闭后,nginx...

作者:admin|分类:大数据|浏览:762
15 11月
elasticsearch防脑裂配置(十一)

elasticsearch防脑裂配置脑裂产生的原因及现象:当公司有多个idc机房,并且有多个es集群节点,这些节点都分布在不同的机房,机房之间通过openvpn进行连接,机房1上有2个es节点,并且有1个是主节点,机房2上有2个es节点都是工作节点,当机房...

作者:admin|分类:大数据|浏览:640
15 11月
filebeat收集json格式的nginx程序日志(二)

filebeat收集json格式的nginx日志1.为什么要收集json格式的日志类型由于nginx普通日志收集过来的日志内容都是存在一个字段中的值,我们想单独对日志中的某一项进行查询统计,比如我只想查看某个IP请求了我那些页面,一共访问了多少次,在普通的...

作者:admin|分类:大数据|浏览:554
15 11月
filebeat将收集的日志存储在指定es索引库并在kibana上展示日志数据(三)

filebeat指定es创建索引的名称并在kibana上展示日志数据1.为什么要指定索引库名称由于一台机器上不止一个应用服务,比如web机器,上面一定会有tomcat、nginx、redis这种服务,如果我们不指定每个应用收集来的日志存放在es集群中的索引...

作者:admin|分类:大数据|浏览:767