掌握分布式跟蹤：微服務(wù)和復(fù)雜系統(tǒng)性能分析

I 引言 1
1 為什么需要分布式跟蹤 2
微服務(wù)與云原生應(yīng)用程序 3
什么是可觀測性 5
微服務(wù)的可觀測性挑戰(zhàn) 7
傳統(tǒng)的監(jiān)控工具 9
指標 10
日志 11
分布式跟蹤 12
我在跟蹤領(lǐng)域的經(jīng)歷 14
為何編寫本書 17
總結(jié) 18
參考資料 19
2 跟蹤一次HotROD之旅 20
先決條件 21
從預(yù)打包的二進制文件運行 21
從Docker鏡像運行 22
從源代碼運行 22
啟動Jaeger 24
初識HotROD 26
架構(gòu) 29
數(shù)據(jù)流 30
上下文日志 32
span標記與日志 35
確定延遲的來源 37
資源使用屬性 50
總結(jié) 53
參考資料 54
3 分布式跟蹤基礎(chǔ) 55
想法 56
請求相關(guān)性 56
黑盒推理 57
特定于域的模式 57
元數(shù)據(jù)傳播 57
剖析分布式跟蹤 59
采樣 60
保留因果關(guān)系 60
請求間因果關(guān)系 62
跟蹤模型 63
事件模型 63
span模型 65
時鐘偏差調(diào)整 67
跟蹤分析 69
總結(jié) 70
參考資料 70
Ⅱ 數(shù)據(jù)收集問題 73
4 OpenTracing的埋點基礎(chǔ) 74
先決條件 76
項目源代碼 76
Go開發(fā)環(huán)境 77
Java開發(fā)環(huán)境 78
Python開發(fā)環(huán)境 78
MySQL數(shù)據(jù)庫 78
查詢工具（curl或wget） 79
跟蹤后端（Jaeger） 79
OpenTracing 80
練習1：Hello應(yīng)用程序 83
用Go語言實現(xiàn)Hello應(yīng)用程序 84
用Java語言實現(xiàn)Hello應(yīng)用程序 88
用Python語言實現(xiàn)Hello應(yīng)用程序 92
練結(jié) 94
練習2：個跟蹤 94
步驟1：創(chuàng)建跟蹤器實例 94
步驟2：啟動span 99
步驟3：注釋span 102
練結(jié) 107
練習3：跟蹤函數(shù)和傳遞上下文 108
步驟1：跟蹤單個函數(shù) 109
步驟2：將多個span合并為一個跟蹤 111
步驟3：傳播進程內(nèi)上下文 115
練結(jié) 123
練習4：跟蹤RPC請求 124
步驟1：拆解單體 124
步驟2：在進程之間傳遞上下文 127
步驟3：應(yīng)用OpenTracing推薦的標記 136
練結(jié) 141
練習5：使用baggage 141
在Go中使用baggage 142
在Java中使用baggage 142
在Python中使用baggage 143
練結(jié) 143
練習6：自動埋點 143
Go中的開源埋點 144
Java中的自動埋點 146
Python中的自動埋點 148
練習7：額外練習 151
總結(jié) 151
參考資料 152
5 異步應(yīng)用程序埋點 153
先決條件 154
項目源代碼 154
Java 開發(fā)環(huán)境 155
Kafka、ZooKeeper、Redis與Jaeger 155
Tracing Talk聊天應(yīng)用程序 156
實現(xiàn) 158
運行應(yīng)用程序 162
觀察跟蹤 163
使用OpenTracing埋點 166
Spring埋點 167
tracer resolver 167
Redis埋點 168
Kafka埋點 170
埋點異步代碼 178
總結(jié) 183
參考資料 183
6 跟蹤標準與生態(tài)系統(tǒng) 184
埋點形式 185
分析跟蹤部署和互操作性 188
跟蹤的五種含義 190
了解受眾 192
生態(tài)系統(tǒng) 193
跟蹤系統(tǒng) 193
X-Ray、Stackdriver等 194
標準項目 194
總結(jié) 200
參考資料 201
7 使用服務(wù)網(wǎng)格進行跟蹤 202
服務(wù)網(wǎng)格 203
服務(wù)網(wǎng)格的可觀測性 206
先決條件 207
項目源代碼 207
Java開發(fā)環(huán)境 208
Kubernetes 208
Istio 208
Hello應(yīng)用程序 210
使用Istio進行分布式跟蹤 213
使用Istio生成服務(wù)圖 223
分布式上下文和路由 225
總結(jié) 228
參考資料 228
8 關(guān)于采樣 230
基于頭部的一致性采樣 231
概率采樣 231
速率限制采樣 232
保證吞吐量的概率采樣 234
自適應(yīng)采樣 235
上下文敏感的采樣 244
實時采樣或調(diào)試采樣 244
如何處理過采樣 247
基于尾部的一致性采樣 249
部分采樣 253
總結(jié) 253
參考資料 253
Ⅲ 從跟蹤中獲取價值 255
9 跟蹤的價值 256
作為知識庫的跟蹤 257
服務(wù)圖 257
深度，路徑感知服務(wù)圖 259
檢測架構(gòu)問題 262
性能分析 263
關(guān)鍵路徑分析 263
識別跟蹤模式 265
范例 269
延遲直方圖 271
長期性能分析 273
總結(jié) 273
參考資料 274
10 分布式上下文傳播 275
布朗跟蹤平面 276
Pivot Tracing 280
混沌工程 283
流量標記 285
生產(chǎn)環(huán)境測試 286
生產(chǎn)環(huán)境調(diào)試 287
在生產(chǎn)環(huán)境中進行開發(fā) 288
總結(jié) 289
參考資料 289
11 集成指標與日志 291
可觀測性的三大支柱 292
先決條件 294
項目源代碼 294
Java開發(fā)環(huán)境 295
在Docker中運行服務(wù)器 295
在Kibana中聲明索引模式 296
運行客戶端 297
Hello應(yīng)用程序 298
與指標集成 299
通過跟蹤埋點實現(xiàn)標準指標 299
向標準指標中添加上下文 303
上下文感知的指標API 308
與日志集成 309
結(jié)構(gòu)化日志記錄 309
將日志與跟蹤上下文關(guān)聯(lián)起來 311
上下文感知的日志API 316
在跟蹤系統(tǒng)中捕獲日志 316
是否需要單獨的日志記錄和跟蹤后端 318
總結(jié) 319
參考資料 320
12 通過數(shù)據(jù)挖掘提煉洞見 321
特征提取 322
數(shù)據(jù)挖掘管道的組件 323
跟蹤后端 324
跟蹤完成觸發(fā)器 324
特征提取器 325
聚合器 326
特征提取練習 326
先決條件 328
項目源代碼 328
在Docker中運行服務(wù)器 329
在Elasticsearch中定義索引映射 330
Java開發(fā)環(huán)境 331
微服務(wù)模擬器 331
在Kibana中定義索引模式 334
span計數(shù)作業(yè) 336
跟蹤完成觸發(fā)器 338
特征提取器 340
觀測趨勢 341
謹防推斷 349
歷史分析 350
實時分析 350
總結(jié) 353
參考資料 353
Ⅳ 部署和維護跟蹤基礎(chǔ)設(shè)施 355
13 在大型組織中實施跟蹤 356
為什么很難部署跟蹤埋點 357
減少采用障礙 358
標準框架 359
內(nèi)部適配器庫 360
默認啟用跟蹤 361
monorepo 361
與現(xiàn)有的基礎(chǔ)設(shè)施集成 362
從哪里開始 362
構(gòu)建文化 364
解釋價值 364
與開發(fā)人員工作流集成 365
跟蹤質(zhì)量指標 366
故障排除指南 369
跳出關(guān)鍵路徑 369
總結(jié) 369
參考資料 370
14 分布式跟蹤系統(tǒng)的底層架構(gòu) 371
為什么需要自己“造輪子” 372
定制和集成 372
帶寬成本 372
把控數(shù)據(jù) 373
押注新興標準 373
架構(gòu)和部署模式 374
基本架構(gòu)：代理 收集器 查詢服務(wù) 374
流式架構(gòu) 377
多租戶 378
安全 381
在多個數(shù)據(jù)中心運行 382
監(jiān)控和故障診斷 384
彈性 386
過采樣 386
調(diào)試跟蹤 387
數(shù)據(jù)中心故障轉(zhuǎn)移導(dǎo)致的流量峰值 387
無休止的跟蹤 387
長跟蹤 388
總結(jié) 388
參考資料 388
后記 390
參考資料 393