基于Ambari搭建大数据平台
基于Ambari搭建大数据平台基于Ambari搭建大数据平台.pdf...
CDP/CDH 7.1.4 大数据平台搭建
CDP/CDH 7.1.4 大数据平台搭建Centos7安装CDP/CDH 7.1.4 具体看附件内容CDH 714 大数据平台搭建-新手指南.pdf...
Redhat7.7中安装CDP DC7.0.3
如何在Redhat7.7中安装CDP DC7.0.3 一：关于CDP DC 7.0.3 概述二： 系统环境初始化三： 构建CDP DC 7.0.3一： 关于CDP DC 7.0.3 概述1.1 CDP dc 7.0.3CDP DC7.0.3是Cloudera与Hortonworks合并后，第一个融合CDH和HDP全部组件的on-premise版本，CDP Data Center主要由Cloudera Runtime构成，Clo...
Hadoop3.x 数据压缩-尚硅谷资料
Hadoop3.x 数据压缩-尚硅谷资料...
filebeat采集一台服务器中的不同日志，并将日志放到ES中的不同索引中
filebeat采集一台服务器中的不同日志，并将日志放到ES中的不同索引中filebeat.inputs:- type: log enabled: true paths: - /usr/local/tomcat/apache-tomcat-8.5.53/logs/catalina.out tags: ["tomcat"] fields: index: &qu...
filebeat配置多日志并输出到elastic不同index索引
filebeat配置多日志并输出到elastic不同index索引filebeat将 /var/log/secure与httpd的日志内容输出到ealsticsearch7.11.2的不同索引。filebeat.inputs: - type: log enabled: true paths: - /var/log/secure include_lines:...
grok语法过滤Centos7 ssh登陆日志方法
grok语法过滤Centos7 ssh登陆日志方法日志内容如下：Apr 19 16:09:30 92-com sshd[2749]: Did not receive identification string from 101.200.56.162 port 53456Apr 19 16:10:26 92-com sshd[2756]: Bad protocol version identification 'GET /console/login/LoginForm....
Azkaban 看这一篇就够了！任务调度平台的搭建，使用，以及API开发
Azkaban 看这一篇就够了！任务调度平台的搭建，使用，以及API开发当你的才华还撑不起你的野心时，那你就应该静下心来学习。每次脑子都会有很多想法，每次做了之后，还是觉得需要沉淀下来提升自己更加重要。著名的红叶子理论：一个人职业的成功不在于红叶子的数目多少，而在于他是否具备一片特别硕大的红叶子，这片特别硕大的红叶子不是与生俱来，需要个人的不断努力，准确地识别到最适合发展的红叶子。目录大纲0 写在前面的话1.1 初识Azkaban1.2 为什么需要任务调度器1.3 常见...
filebeat7.10+logstash7.10+Elastic+kibana收集centos系统ssh日志IP并将IP地图化展示
filebeat7.10+logstash7.10+Elastic7.10+kibana7.10收集centos系统ssh日志IP并将IP地图化展示1，配置信息如下：IP系统JDKEasticFilebeatlogstashKibana192.168.137.30Centos7openjdk-11elastic7.10------logstash7.10Kibana7.10192.168.137.26Centos7openjdk-11elastic7.10Filebeat7....
ES7+kibana7解决geoip的location不为geo_point格式,无法建可视化地图
ES7+kibana7解决geoip的location不为geo_point格式,无法建可视化地图by: 铁乐猫 环境：ELK各组件均为7.0版本出现问题的索引名称为tielemao_web_log*问题：使用了geoip插件，入库的索引中location仍不是geo_point格式，以致想做地图经纬度的展示时做不了。原因:默认的log_template模板中没有任何匹配。解决办法：新建索引模板，设置匹配成geo_point，且优先度调高。另外为防以后新项目入log...