您的位置:首页 > 健康 > 美食 > 高端企业网站建设方案_web是什么意思动漫_东莞seo优化方案_百度推广费用可以退吗

高端企业网站建设方案_web是什么意思动漫_东莞seo优化方案_百度推广费用可以退吗

2024/12/23 15:59:34 来源:https://blog.csdn.net/FLGBgo/article/details/144193397  浏览:    关键词:高端企业网站建设方案_web是什么意思动漫_东莞seo优化方案_百度推广费用可以退吗
高端企业网站建设方案_web是什么意思动漫_东莞seo优化方案_百度推广费用可以退吗

Kafka2.2.0 三节点集群搭建

Kafka2.2.0 基于zookeeper搭建,这里也搭建一个三个节点的集群。(在一个节点模拟三节点,真实的三节点把ip替换一下即可,按照hadoop案件把网络打通即可)

1、下载解压

Kafka 安装包官方下载地址 ,本用例下载的版本为 2.2.0 ,下
载命令:

# 下载wget https://www-eu.apache.org/dist/kafka/2.2.0/kafka_2.12-2.2.0.tgz#cp到指定目录
cp kafka_2.12-2.2.0.tgz /usr/app/
# 解压tar -xzf kafka_2.12-2.2.0.tgz

2 拷贝配置文件

进入解压目录的 config 目录下 ,拷贝三份配置文件:

 cp server.properties server-1.propertiescp server.properties server-2.propertiescp server.properties server-3.properties

3 修改配置

分别修改三份配置文件中的部分配置,如下:

只修改下面的属性,其他的属性不需要动

server-1.properties

# The id of the broker. 集群中每个节点的唯一标识broker.id=0# 监听地址,hadoop101是本机域名listeners=PLAINTEXT://hadoop101:9092# 数据的存储位置log.dirs=/usr/local/kafka-logs/00# Zookeeper连接地址(如果Zookeeper和kafka都在一个节点上,节点对应域名就是hadoop101节点)zookeeper.connect=hadoop101:2181,hadoop101:2182,hadoop101:2183

server-2.properties

broker.id=1listeners=PLAINTEXT://hadoop101:9093log.dirs=/usr/local/kafka-logs/01zookeeper.connect=hadoop101:2181,hadoop101:2182,hadoop101:2183

server-3.properties

broker.id=2listeners=PLAINTEXT://hadoop101:9094log.dirs=/usr/local/kafka-logs/02zookeeper.connect=hadoop101:2181,hadoop101:2182,hadoop101:2183

这里需要说明的是 log.dirs 指的是数据日志的存储位置,确切的说,就是分区数据的存储位置。程序运行日志的位置是通过同一目录下的 log4j.properties 进行配置的。

4 启动集群

分别指定不同配置文件,启动三个 Kafka 节点。启动后可以使用 jps 查看进程,此时应该有三个
zookeeper 进程和三个 kafka 进程。

#在kafka目录下运行, & 后台运行
bin/kafka-server-start.sh config/server-1.properties &
bin/kafka-server-start.sh config/server-2.properties &
bin/kafka-server-start.sh config/server-3.properties &

停止kafka

bin/kafka-server-stop.sh

5 创建测试主题

创建测试topic,一个分区 三个副本

bin/kafka-topics.sh --create --bootstrap-server hadoop101:9092 \--replication-factor 3 \--partitions 1 --topic my-test-topic

创建后可以使用以下命令查看创建的主题信息:

bin/kafka-topics.sh --describe --bootstrap-server hadoop101:9092 --topic my-test-topic

在这里插入图片描述
可以看到分区 0 的有 0,1,2 三个副本,且三个副本都是可用副本,都在 ISR(in-sync Replica 同步副本)

列表中,其中 0 为首领副本,此时代表集群已经搭建成功。

版权声明:

本网仅为发布的内容提供存储空间,不对发表、转载的内容提供任何形式的保证。凡本网注明“来源:XXX网络”的作品,均转载自其它媒体,著作权归作者所有,商业转载请联系作者获得授权,非商业转载请注明出处。

我们尊重并感谢每一位作者,均已注明文章来源和作者。如因作品内容、版权或其它问题,请及时与我们联系,联系邮箱:809451989@qq.com,投稿邮箱:809451989@qq.com