|
简介 本专栏主要是面向kafka开发者&＃xff0c;介绍kafka的概念、架构、核心原理&＃xff0c;并重点介绍开发方法。 特点是&＃xff1a;系统化、完整的向读者介绍面向kafka的开发体系&＃xff01; 直播课以及录播课&＃xff0c;都基于哔哩哔哩进行中&＃xff0c;视频都是免费的&＃xff0c;而且制作精良哦&＃xff01; 大家可以看看课程的ppt&＃xff08;随视频录制逐渐添加-zimug-com&＃xff09;&＃xff1a;http://zimug.com/ppt-kafka/index.html &＃xff0c;用心不&＃xff1f; 加微信群 如果二维码过期&＃xff0c;可以访问 zimug.com , 获取我的联系方式  内容简介 第一章 kafka基础入门&＃xff1a;主要向开发者介绍什么是消息队列&＃xff1f;以及什么场景下使用消息队列&＃xff1f;介绍kafka的基础概念&＃xff0c;kafka基础概念是非常重要的知识内容&＃xff0c;对开发者学习kafka应用开发以及运维人员管理集群都有非常重要的作用。另外介绍kafka单机版的安装&＃xff0c;为后续学习提供一个基础环境。介绍kafka3.0中一个非常重要的变化&＃xff1a;zookeeper被替换掉了。第二章 kafka集群安装&＃xff1a;介绍在生产级别的环境下&＃xff0c;如何保证集群安装的可用性、可靠性&＃xff0c;以及如何提高安装的便捷性。其实还另外涉及到安全性的问题&＃xff0c;在第七章中进行介绍。包括kafka3.0版本在没有zookeeper情况下如何安装。第三章、第四章&＃xff1a;介绍apache kafka 原生Java API&＃xff0c;如何操作生产者消费者&＃xff0c;以及生产者数据生产流程中的可靠性、顺序性、幂等性、事务的保证&＃xff0c;拦截器、序列化器、分区器的自定义实现等&＃xff1b;消费者的消费偏移提交、数据积压、分区再均衡问题原因及就解决方法&＃xff0c;消费者拦截器以及反序列化器的实现。第五章 &＃xff1a;介绍更高级的Spring Kafka API如何实现数据生产、消费。第六章&＃xff1a;主要介绍kafka集群的安全性保证&＃xff0c;包括认证模式&＃xff0c;以及ACL权限控制管理。第七章&＃xff1a;总结topic管理命令&＃xff0c;并介绍一个图形界面化kafka管理工具-kafka tool。这一章中&＃xff0c;企业级监控管理服务LogiKM也在笔者计划中&＃xff0c;但是暂未撰写完成。这也只是个工具&＃xff0c;面向开发者而言并不太重要&＃xff01; 详细目录如下&＃xff1a; 一、kafka基础入门 1.1.白话消息队列1.2.消息传递模型1.3.典型应用场景一1.4.典型应用场景二1.5.kafka简单介绍1.6.kafka基础概念解析1.7.搭建kafka单机版1.8.kafka3中zk替代方案 二、生产级集群安装 2.1.linux安装JDK2.2.linux主机与ip解析2.3.linux新建用户2.4.linux开放防火墙端口2.5.最大打开文件句柄数2.6.集群主机之间免密登录2.7.zookeeper集群安装(脚本)2.8.kafka集群安装部署(脚本)2.9.kafka3无需zk的集群安装2.10.集群可用性验证及配置2.11.kafka集群可靠性配置 三、生产者客户端 3.1.本章阅读说明3.2.图解kafka生产者3.3.数据生产可靠性3.4.保证消息顺序性3.5.生产者Java实现3.6.自定义拦截器3.7.自定义序列化器3.8.自定义分区器3.9.幂等与事务处理 四、消费者客户端 4.1.消费者组与数据积压4.2.消费者Java实现4.3.消费偏移与可靠性4.4.分区再均衡4.5.线程池与消费者组4.6.消费者拦截器4.7.自定义反序列化器 五、SpringBoot集成kafka 5.1.整合集成kafka客户端5.2.生产者同步异步分区拦截5.3.生产者事务处理5.4.KafkaListener详解5.5.Header及sendTo5.5.监听器模式及偏移量提交5.3.消费监听器的异常处理5.6.JSON序列化日期问题处理 六、kafka安全认证 6.1.用户名密码PLAIN认证6.2.SCRAM认证6.3.Kerberos认证(撰写中) 七、kafka运维配置管理 7.1.topic管理命令7.2.KafkaTool带界面管理工具7.3.LogiKM企业级监控管理(撰写中) 附录 linux虚拟机集群的搭建
|