Zookeeper集群搭建！ZooKeeper在Hadoop中的作用→

本文目录一览：

• 1、zookeeper异族配置方法
• 2、实战指南-构建安全可靠的Kafka集群并配置SASL/PLAIN认证
• 3、大数据NiFi(五):NiFi分布式安装

zookeeper异族配置方法

1、Zookeeper集群配置Zookeeper集群搭建的方法如下Zookeeper集群搭建：准备工作 服务器规划 确定需要部署Zookeeper集群的服务器数量，一般建议为奇数台，如3台、5台等，以保证集群的容错性。例如，准备三台服务器，分别命名为zkzkzk3。

2、通过相应的系统命令，如在Linux系统中使用`service zookeeper stop`或`kill -9 zookeeper_pid`等方式确保Zookeeper完全停止运行。配置Kraft相关参数 创建集群ID：在Kafka集群的某个节点上，运行命令创建一个唯一的集群ID。例如，使用`kafka-storage.sh random-uuid`生成集群ID。

3、命令：双击zkServer.cmd文件，或者在命令提示符（CMD）中导航到ZooKeeper安装目录的bin文件夹下，然后运行zkServer.cmd命令。操作说明：确保ZooKeeper已经正确安装并配置。安装完成后，在ZooKeeper的安装目录下的bin文件夹中，可以找到zkServer.cmd文件。

4、Linux下ZooKeeper的安装与启动步骤如下：安装步骤 下载安装包：访问ZooKeeper的官方网站，下载相应版本的安装包。解压安装包：将下载的安装包解压到指定的目录。配置关键参数：tickTime：ZooKeeper的基本时间单位，用于同步和心跳检测，需根据实际需求配置。

实战指南-构建安全可靠的Kafka集群并配置SASL/PLAIN认证

配置三台机器和IP：为每台虚拟机设置唯一Zookeeper集群搭建的IP地址Zookeeper集群搭建，并确保它们之间网络互通。修改Kafka配置文件：主要修改server.properties文件Zookeeper集群搭建，包括设置broker.id、zookeeper连接地址、日志目录等。配置SASL/PLAIN认证 SASL/PLAIN认证简介：SASL是一种用于为连接提供认证和可选的安全层的框架。

SASL认证通过Java认证与授权服务（JAAS）实现。本文通过简单例子直观解析Kafka服务器与客户端配置。搭建Kafka集群 以3台虚拟机Linux环境为例，安装JDK、Zookeeper与Kafka。配置三台机器和IP，下载软件包并安装。安装Java，配置Zookeeper集群，安装Kafka。

在sasl.jaas.config参数中，消费者可以指定Kafka的PLAIN认证方式，并提供相应的用户名和密码。账号密码的获取：管理员提供：Kafka的账号密码通常由集群的管理员预先配置好，并提供给需要访问Kafka集群的用户。申请流程：在某些情况下，用户可能需要通过特定的流程或系统来申请和获取账号密码。

大数据NiFi(五):NiFi分布式安装

文章主要包括以下部分：Apache SeaTunnel 简介 SeaTunnel 实质上是对 Spark 和 Flink Zookeeper集群搭建的封装Zookeeper集群搭建，新版本还引入Zookeeper集群搭建了自研Zookeeper集群搭建的 SeaTunnel 引擎。它通过配置文件快速构建工作流Zookeeper集群搭建，支持多种数据源、转换插件，以及轻量级的安装和启动方式。

可使用NiFi自带的内置ZooKeeper，也可使用用户安装的ZooKeeper集群（版本需为5以上）。

或直接删除NiFi安装目录（根据实际需求选择）。验证结果：重启主机后，节点不会再次出现在集群管理页面。

具体步骤：启动MySQL的binlog日志：确保MySQL的binlog功能已启用，这是捕获数据变更的基础。配置NiFi处理器：在NiFi中配置上述核心组件，包括创建控制服务、设置调度访问周期等。配置CaptureChangeMySQL处理器：创建控制服务。设置调度访问周期，确定数据捕获的频率。匹配需要同步的MySQL表名。