分类:运维

运维工具:Operation Tool

2021-04-15 0 By admin

Kafka 服务ACLs 管理介绍

Kafka 服务的ACLs规则的管理操作由 kafka-acls.sh 脚本处理。 一、kafka-acls.sh 脚本使用介绍 1.1、ACLs规则的基本操作 –add: 添加ACL规则 –remove: 删除指定ACL规则 –list: 列出ACLs 规则,结…

2021-04-13 0 By admin

Kafka 服务的消费者群组管理操作

在Kafka里,有两个地方保存着消费者群组的信息。 对于旧版本的消费者来说,它们的信息保存在Zookeeper上。 对于新版本的消费者来说,它们的信息保存在broker上。 kafka-consumer-groups.sh工具可以用于列出上述两种消费者群组。它也可以用于删除消费者群组和偏移量信息,不…

2021-04-13 0 By admin

Kafka 服务的硬件选配思路

在我们为生产环境部署 Kafka 服务时,就需要了解到不同的硬件资源对 Kafka 服务的影响方面。 Kafka本身对硬件没有特殊的要求,它可以运行在任何系统上。不过,如果比较关注性能,就需要考虑几个会影响整体性能的因素:磁盘吞吐量,容量,内存,网络和CPU。确定了性能点,就可以在预算范围内选择最优…

2021-04-08 0 By admin

Kafka 服务ACL权限管理

在介绍了 Kafka 服务的用户认证后,我们需要对登录的用户进行权限管理;进一步提高服务的安全性。对Kafka 服务设置 ACL 权限管理,其配置很容易,只需要在服务配置文件中加入几个配置项即可;难点在于 ACL 权限管理依赖于 kafka的用户认证,所以需要把 Kafka 服务的用户认证配置完成;…

2021-04-08 0 By admin

Kafka 服务配置用户认证

在 kafka 服务维护过程中,一般我们需要对其设置用户认证;保证其安全使用。Kafka 服务支持多种认证方式:这里使用 PLAIN 这种简单的认证。 GSSAPI:使用的Kerberos认证,可以集成目录服务,比如AD。Kafka最小版本 0.9 PLAIN:使用简单用户名和密码形式,Kafka最…

2021-03-25 0 By admin

ES 集群级路由和分片分配

集群级路由和分片分配(Cluster Level Shard Allocationedit)用于控制在何处,何时以及如何将分片分配给节点的设置。 Master 节点的主要角色之一是确定将哪些分片分配给哪些节点,以及何时在节点之间移动分片以重新平衡群集。 有许多设置可用于控制分片分配过程: 群集级分片…

2021-03-03 0 By admin

ElasticSearch 服务设置内存锁定

在配置 ElasticSearch 服务过程中,我们一般要设置 bootstrap.memory_lock 为 true,避免内存数据被交换到 SWAP 分区中。在不同的操作系统中,配置 ElasticSearch 服务可以锁定内存的方式也不同。 一、Centos 6 非Systemd 系统 在 C…