当前位置: 首页 > news >正文

权重网站建设数据分析师培训机构推荐

权重网站建设,数据分析师培训机构推荐,河南论坛网站建设,十堰网站建设多少钱一、#创作灵感# 公司使用Kafka的软件项目较多,故写技术笔记巩固知识要点 二、软件环境 - Kafka 3.9.0 官方下载地址:Kafka 3.9.0 - Docker Desktop 4.37 容器图形化工具 官方下载地址:Docker Desktop 4.37 特别说明 - Docker Desktop…

 一、#创作灵感#

公司使用Kafka的软件项目较多,故写技术笔记巩固知识要点

二、软件环境

- Kafka 3.9.0  官方下载地址:Kafka 3.9.0

- Docker Desktop 4.37 容器图形化工具  官方下载地址:Docker Desktop 4.37

特别说明

Docker Desktop仅仅是Windows下镜像用,如有能爬楼的服务器可不安装此软件

- 本文以单机模式为例

三、常规方式安装

非容器化Kraft Mode(模式)安装

1、下载Kafka

参见上面的软件环境章节的下载地址

2、修改Kafka配置

# Kraft模式启动

vi $KAFKA_HOME/config/kraft/server.properties

关键设置包括

# 指定此节点是否应该成为控制平面的一部分
process.roles=controller,kafka# KRaft模式下的节点ID,每个节点的ID必须唯一
node.id=1# 监听器地址,用于集群内通信
listeners=PLAINTEXT://localhost:9092# 控制平面监听器地址
controller.listeners=PLAINTEXT://localhost:9090# 用于集群通信的安全协议以及相关的认证和授权配置
inter.broker.listener.name=CONTROLLER# 控制平面的ADVERTISED.LISTENERS,用于其他节点发现
controller.listener.names=CONTROLLER
controller.advertised.listeners=PLAINTEXT://localhost:9090# 用于KRaft模式的元数据复制因子,通常设置为集群中控制器的数量
metadata.max.age=300000# 日志存储配置,指定日志的位置和格式
log.dirs=/tmp/kraft-logs
log.retention.hours=168# 控制平面的选举配置和集群成员配置
control.plane.listener.name=CONTROLLER
control.plane.advertised.listeners=PLAINTEXT://localhost:9090# 集群的初始/bootstrap状态
process.roles=controller
node.id=1
listeners=CONTROLLER://localhost:9090
inter.broker.listener.name=CONTROLLER

5、Zookeeper模式启动Kafka

# Start the Kafka broker service
$ bin/kafka-server-start.sh config/kraft/server.properties

四、容器方式安装

容器化Kraft Mode(模式)安装

1、容器启动Kafka

- 下载镜像

下载一体化官方镜像

$ docker pull confluentinc/cp-kafka:7.0.1

 - 创建ConfigMap资源

用于定义Kafka配置

apiVersion: v1
kind: ConfigMap
metadata:name: kafka-config
data:config.properties: |process.roles=brokernode.id=1listeners=PLAINTEXT://:9092inter.broker.listener.name=PLAINTEXT...

- 创建Deployment资源

用于部署Kafka Pod

apiVersion: apps/v1
kind: Deployment
metadata:name: kafka-deployment
spec:replicas: 3selector:matchLabels:app: kafkatemplate:metadata:labels:app: kafkaspec:containers:- name: kafkaimage: confluentinc/cp-kafka:7.0.1ports:- containerPort: 9092env:- name: CONFIG_FILEvalue: "/etc/kafka/conf/config.properties"...volumeMounts:- name: config-volumemountPath: /etc/kafka/confvolumes:- name: config-volumeconfigMap:name: kafka-config

- 创建Service资源

用于对外暴露Kafka服务

apiVersion: v1
kind: Service
metadata:name: kafka-service
spec:selector:app: kafkaports:- protocol: TCPport: 9092targetPort: 9092

- 应用到你的Kubernetes集群

这些YAML文件定义了Kafka的配置、部署和服务。你需要将它们保存为文件,然后使用kubectl 应用到你的Kubernetes集群

kubectl apply -f configmap.yaml
kubectl apply -f deployment.yaml
kubectl apply -f service.yaml

- (或)使用镜像启动容器

# 假设打好的镜像id是fe7e6a65afa5
docker run \
--name=cp-kafka \
-p 2181:2181 \
-p 9092:9092 \
-p 19092:19092 \
-d fe7e6a65afa5

五、要点总结

      - Zookeeper Mode使用的配置是$KFAKA_HOME/config/server.properties

      - Kraft Mode使用的配置是$KFAKA_HOME/config/kraft/server.properties

      - Zookeeper Mode启动见作者的文章:Zookeeper模式安装Kafka

http://www.ds6.com.cn/news/89508.html

相关文章:

  • 网站制作把图片做背景seo内容优化是什么意思
  • 成都网站原创网络黄页推广软件哪个好用
  • 免费在线观看电影网站微信如何投放广告
  • 黄骅港潮汐表2022最新表seo扣费系统源码
  • 徐州网站优化竞价托管代运营
  • 用ps做美食网站免费的自助建站
  • 软盟软件 app开发公司引擎seo如何优化
  • 网站如何制作 优帮云怎么建一个自己的网站
  • 教师做班级网站成都官网seo服务
  • wordpress 评论插入图片北京优化网站建设
  • 沈阳个人做网站2023新闻摘抄十条
  • 做网站属于技术开发吗百度推广助手app
  • 谷歌怎么把两个网站做反链全媒体运营师报考条件
  • 长春建站宣传最近的时事新闻
  • 网站品牌建设方案网站制作的流程
  • 天猫秘券网站怎么做重庆网站seo诊断
  • 嘉兴网站制作报价优化大师使用方法
  • 网站页脚优化怎么做seo外链发布
  • 在线网页客服企业网站seo优化公司
  • 做网站网站加载内容慢怎么解决河南seo优化
  • 做词云的网站南城网站优化公司
  • 苏州专业做网站的公司有哪些seo快速优化软件网站
  • 新余市建设局网站百度搜索引擎竞价排名
  • 东莞seo网站建设抖音seo软件工具
  • 500元制作网站dw网站制作
  • 崂山区建设管理局网站怎么了黑企业文化理念
  • 在什么网站做兼职百度站长平台怎么用
  • 旅游网站建设方案希爱力副作用太强了
  • 福建省建住房建设部网站tool站长工具
  • wordpress 制作企业站百度广告运营