Apache Pulsar原理解析与应用实践

前　言
基础篇
第1章　Pulsar概述　　2
1.1　Pulsar是什么　　2
1.2　Pulsar的优势　　3
1.2.1　Pulsar不只是消息队列　　4
1.2.2　存储与计算分离　　4
1.2.3　云原生架构　　5
1.2.4　Pulsar的存储特性　　6
1.2.5　消息传输协议　　8
1.2.6　消费方式　　8
1.2.7　丰富的功能与生态　　9
1.3　消息队列对比　　9
1.3.1　消息队列简介　　10
1.3.2　性能与可靠性　　11
1.3.3　功能特性对比　　14
1.4　快速体验　　17
1.4.1　下载安装　　17
1.4.2　单机服务启动　　17
1.4.3　生产与消费　　18
第2章　Pulsar的基本概念和架构
详解　　20
2.1　Pulsar的基本概念　　20
2.1.1　多租户与命名空间　　20
2.1.2　主题　　21
2.1.3　生产者　　22
2.1.4　消费者与订阅　　24
2.1.5　消息的保留与过期　　27
2.2　Pulsar的逻辑架构　　28
2.2.1　主题的配置管理　　29
2.2.2　主题的数据流转　　30
2.2.3　主题的数据存储　　31
2.3　Pulsar物理架构　　32
2.3.1　物理架构概述　　32
2.3.2　核心组件与服务　　35
第3章　Pulsar安装与部署　　39
3.1　依赖环境　　39
3.1.1　安装Java　　39
3.1.2　Pulsar安装包　　40
3.2　分布式部署　　42
3.2.1　资源分配规划　　42
3.2.2　集群搭建实战　　44
3.3　Docker部署　　47
3.3.1　Docker单机部署　　47
3.3.2　Docker分布式部署　　48
3.4　Kubernetes部署　　48
3.4.1　minikube环境安装　　48
3.4.2　Helm Chart安装　　49
3.4.3　在Kubernetes中使用
Pulsar　　51
3.5　源码的结构与编译　　52
3.5.1　源码结构　　52
3.5.2　源码编译　　52
第4章　Pulsar的基本操作　　54
4.1　生产者开发　　54
4.1.1　生产者概览　　54
4.1.2　构建客户端对象　　56
4.1.3　构建生产者　　58
4.1.4　数据发送路由规则　　60
4.1.5　分批发送　　63
4.1.6　分块发送　　64
4.1.7　生产者拦截器　　64
4.2　消费者开发　　65
4.2.1　构建消费者　　65
4.2.2　数据确认　　68
4.2.3　消费者拦截器　　72
4.2.4　消费者监听器　　72
4.3　Reader开发　　73
4.4　模式管理　　74
4.4.1　模式类型　　75
4.4.2　自动模式　　78
4.4.3　模式管理　　79
原理篇
第5章　Pulsar核心组件原理　　84
5.1　Broker原理　　84
5.1.1　通信协议层　　84
5.1.2　主题查找服务　　89
5.1.3　租户与命名空间管理　　90
5.1.4　负载管理　　92
5.2　BookKeeper原理　　94
5.2.1　BookKeeper简介　　94
5.2.2　BookKeeper的使用　　100
5.3　ManagedLedger组件　　100
5.3.1　ManagedLedger简介　　101
5.3.2　消息积压的配额管理　　102
5.3.3　消息的保留与清理　　103
5.3.4　消息的写入　　104
5.3.5　消息的缓存与读取　　104
5.4　主题管理　　105
5.4.1　Pulsar主题管理架构　　106
5.4.2　生产者原理　　108
5.4.3　订阅与消费者原理　　110
5.4.4　消息生存时间与持久化
控制　　114
第6章　Pulsar高级特性　　115
6.1　Pulsar事务　　115
6.1.1　消息队列事务隔离级别　　116
6.1.2　Pulsar事务简介　　117
6.1.3　Pulsar事务的使用方法　　118
6.1.4　Pulsar事务实现原理及关键
流程　　119
6.2　消息队列协议层　　122
6.2.1　协议处理器　　122
6.2.2　Pulsar上的Kafka简介　　125
6.2.3　Pulsar上的Kafka使用　　126
6.2.4　Pulsar上的Kafka工作
原理　　128
6.3　分层存储　　130
6.3.1　分层存储的设计　　130
6.3.2　分层存储的使用　　131
6.3.3　分层存储的原理　　133
6.4　消息延迟传递　　133
6.5　主题压缩　　134
6.5.1　主题压缩应用　　135
6.5.2　主题压缩原理　　135
第7章　Pulsar Function与
Pulsar I/O　　137
7.1　Pulsar Function简介　　137
7.1.1　Pulsar Function编程模型　　137
7.1.2　Pulsar Function逻辑结构与
应用场景　　140
7.2　Pulsar Function应用实践　　141
7.2.1　Pulsar Function的部署与
使用　　141
7.2.2　自定义Pulsar Function
开发　　146
7.2.3　Pulsar Function语义支持　　148
7.3　Pulsar Function原理　　150
7.3.1　Pulsar Function运行流程　　150
7.3.2　Function Worker组件工作
原理　　152
7.3.3　Pulsar运行时　　153
7.4　Pulsar I/O　　154
7.4.1　Pulsar I/O概述　　154
7.4.2　使用内置的P