1. kafka监控kafka自身没有监控管理页面，无论是进行一些管理操作还是状态的监控都要命令加一大堆记不住的参数，实在是很不方便，不过好在在github上开源了一些工具，在kafka的生态系统中也有提及到：Kafka Manager: 都是以表格的形式...

参考，https://cwiki.apache.org/confluence/display/KAFKA/System+Toolshttps://cwiki.apache.org/confluence/display/KAFKA/Replication+t...

MirrorMaker是为解决Kafka跨集群同步、创建镜像集群而存在的；下图展示了其工作原理。该工具消费源集群消息然后将数据重新推送到目标集群。MirrorMaker使用方式启动mirror-maker程序需要一个或多个consumer配置文件、一个pr...

系统参数#唯一标识在集群中的ID，要求是正数。broker.id=0#服务端口，默认9092port=9092#监听地址host.name=debugo01# 处理网络请求的最大线程数num.network.threads=2# 处理磁盘I/O的线程数nu...

本文重点介绍kafka的两类常见数据迁移方式：1、broker内部不同数据盘之间的分区数据迁移；2、不同broker之间的分区数据迁移。一、broker 内部不同数据盘之间进行分区数据迁移1.1 背景介绍最近，腾讯云的一个重要客户发现kafka broke...

切记要关闭防火墙和selinux，cpu核心数至少为2 配置解析 [root@k8s-master ~]# cat /etc/hosts 127.0.0.1 localhost localhost.localdomain lo...

...

实验环境 IP 主机名 192.168.3.101 k8s-master1 192.168.3....

一.基础环境准备 1.个节点设置主机名 hostnamectl set-hostname k8s-master1 hostnamectl set-hostname k8s-master2 hostnamectl set-hostname k8s...

文章目录1. linux ssh免密登陆配置2. java环境配置3. Hadoop完全分布式(full 4. hadoop高可用集群搭建（HA）4.1 安装配置zookeeper4.2 安装配置hadoop HA4.3 hadoop HA集群的启动步骤1...