联系我们
 课程时长 21 小时

课程大纲

模块 1:Confluent Apache Kafka 集群的架构和配置介绍

  • Kafka 在现代数据管道中的角色
  • Apache Kafka 与 Confluent Kafka 的区别
  • 核心组件:生产者、消费者、代理、主题、分区
  • Kafka 集群部署模型和扩展考量

模块 2:Zookeeper 仲裁组配置

  • 什么是 Zookeeper?
  • Zookeeper 在 Kafka 集群中的作用
  • Zookeeper 仲裁组大小
  • Zookeeper 配置
  • 在服务器上实施 SSH
  • 实践:Zookeeper 配置(作为团队和服务)
  • 使用 Zookeeper 命令行界面 (CLI)
  • 实践:Zookeeper 仲裁组配置
  • Zookeeper 内部文件系统
  • 影响 Zookeeper 的性能因素
  • 演示 Zookeeper 和 Zoonavigator 的管理工具

模块 3:Kafka 集群配置

  • Kafka 基本概念
  • Kafka 配置
  • 实践:Kafka 代理配置
  • 实践:执行 Kafka 命令
  • 实践:Kafka 多代理集群配置
  • 实践:Kafka 集群测试
  • 我可以连接到我的 Kafka 集群吗?
  • Advertised.listeners 配置:最重要的设置
  • 主题配置
  • 下载和摄取主题消息的配置
  • 实践:演示 Kafka 的弹性
  • Kafka 性能:I/O
  • Kafka 性能:网络 (RED)
  • Kafka 性能:RAM
  • Kafka 性能:CPU
  • Kafka 性能:操作系统 (OS)
  • Kafka 性能:其他
  • 实践:如何更改 Kafka 代理配置

模块 4:高级 Kafka 配置

  • Landoop Kafka 主题用户界面,Confluent REST Proxy,Confluent Schema Registry 配置
  • 发送和接收消息(CLI、Java 和 Spring 框架)
  • 监控指标和工具(Confluent Control Center、Elasticsearch 等)
  • 日志文件和偏移量管理
  • 高可用性和灾难恢复
  • 通过复制确保高可用性
  • 调整生产者和消费者性能
  • 灾难恢复策略
  • 故障切换控制和数据恢复
  • 连接器配置
  • Kafka Connect 实施
  • Kafka 安全功能

总结和后续步骤

要求

  • 熟悉分布式系统和消息概念
  • 具有 Linux 命令行经验
  • 具备网络和系统管理的基本理解

受众

  • 系统管理员
  • DevOps 工程师
  • 平台和基础设施团队

客户评论 (2)

即将举行的公开课程

课程分类