虚拟化容器,大数据,DBA,中间件,监控。
15 11月
Kafka Tools

参考,https://cwiki.apache.org/confluence/display/KAFKA/System+Toolshttps://cwiki.apache.org/confluence/display/KAFKA/Replication+t...

作者:admin|分类:大数据|浏览:711
15 11月
Kafka跨集群同步工具——MirrorMaker (consumer.config & producer.config )

MirrorMaker是为解决Kafka跨集群同步、创建镜像集群而存在的;下图展示了其工作原理。该工具消费源集群消息然后将数据重新推送到目标集群。MirrorMaker使用方式启动mirror-maker程序需要一个或多个consumer配置文件、一个pr...

作者:admin|分类:大数据|浏览:568
15 11月
Kafka主要参数详解

系统参数#唯一标识在集群中的ID,要求是正数。broker.id=0#服务端口,默认9092port=9092#监听地址host.name=debugo01# 处理网络请求的最大线程数num.network.threads=2# 处理磁盘I/O的线程数nu...

作者:admin|分类:大数据|浏览:546
15 11月
kafka数据迁移实践

本文重点介绍kafka的两类常见数据迁移方式:1、broker内部不同数据盘之间的分区数据迁移;2、不同broker之间的分区数据迁移。一、broker 内部不同数据盘之间进行分区数据迁移1.1 背景介绍最近,腾讯云的一个重要客户发现kafka broke...

作者:admin|分类:大数据|浏览:540
15 11月
kubeadm方式部署k8sV1.22.2集群版本

切记要关闭防火墙和selinux,cpu核心数至少为2 配置解析 [root@k8s-master ~]# cat /etc/hosts 127.0.0.1 localhost localhost.localdomain lo...

作者:admin|分类:容器虚拟化|浏览:685
15 11月