编程进阶网 编程进阶网
首页
  • 在线工具
  • JSON工具
  • 文本工具
  • 图片处理
  • 文档转化
  • 代码压缩
  • 加解密
  • 时间日期
  • 网络工具
  • 颜色设计
  • 二维码
  • 开发实用
  • 计算机组成原理
  • 操作系统原理
  • 网络协议原理
  • 数据库系统原理
  • 序卷导读
  • 数据本质
  • 运行模型
  • 并发设计
  • 内存真相
  • 交互系统
  • 面向对象
  • 设计原则
  • 设计模式
  • 系统架构
  • 体系建设
  • 代码品质
  • 方案设计
  • 稳定可靠
  • 工程运维
  • 性能优化
  • 数据结构导论
  • 线性结构详解
  • 树哈希结构论
  • 容器设计实战
  • 经典算法思想
  • 工程案例剖析
  • 算法题库精练
  • C语言入门
  • C综合案例
  • C专栏博客
  • C标准集库
  • C++入门教程
  • C++综合案例
  • C++专栏博客
  • C++编程技巧
  • Java入门教程
  • Java综合案例
  • Java专栏博客
  • Go入门教程
  • Go综合案例
  • Go专栏博客
  • Go开发技巧
  • JavaScript入门
  • JavaScript案例
  • JavaScript高级
  • Android库解读
  • Android专栏
  • iOS ObjC入门
  • iOS Swift入门
  • iOS入门精通
  • Web之Html手册
  • Web之TypeScript
  • Web之Vue高级进阶
  • Linux之QML入门
  • Linux之QT核心库
  • Python教程
  • Shell&Bash教程
  • 工具脚本
  • 自动化脚本
  • 质量保障
  • 产品思考
  • 软实力
  • 开发流程
  • Git应用
  • 技术模版
  • 技术规范
  • Markdown
  • Mermaid
  • 开源协议
  • 毛选解读
  • 自我精进
  • 关于我
  • 自我精进
  • 职场管理
  • 职场面试
  • 心情杂货
  • 友情链接

杨充

专注编程 · 终身学习者
首页
  • 在线工具
  • JSON工具
  • 文本工具
  • 图片处理
  • 文档转化
  • 代码压缩
  • 加解密
  • 时间日期
  • 网络工具
  • 颜色设计
  • 二维码
  • 开发实用
  • 计算机组成原理
  • 操作系统原理
  • 网络协议原理
  • 数据库系统原理
  • 序卷导读
  • 数据本质
  • 运行模型
  • 并发设计
  • 内存真相
  • 交互系统
  • 面向对象
  • 设计原则
  • 设计模式
  • 系统架构
  • 体系建设
  • 代码品质
  • 方案设计
  • 稳定可靠
  • 工程运维
  • 性能优化
  • 数据结构导论
  • 线性结构详解
  • 树哈希结构论
  • 容器设计实战
  • 经典算法思想
  • 工程案例剖析
  • 算法题库精练
  • C语言入门
  • C综合案例
  • C专栏博客
  • C标准集库
  • C++入门教程
  • C++综合案例
  • C++专栏博客
  • C++编程技巧
  • Java入门教程
  • Java综合案例
  • Java专栏博客
  • Go入门教程
  • Go综合案例
  • Go专栏博客
  • Go开发技巧
  • JavaScript入门
  • JavaScript案例
  • JavaScript高级
  • Android库解读
  • Android专栏
  • iOS ObjC入门
  • iOS Swift入门
  • iOS入门精通
  • Web之Html手册
  • Web之TypeScript
  • Web之Vue高级进阶
  • Linux之QML入门
  • Linux之QT核心库
  • Python教程
  • Shell&Bash教程
  • 工具脚本
  • 自动化脚本
  • 质量保障
  • 产品思考
  • 软实力
  • 开发流程
  • Git应用
  • 技术模版
  • 技术规范
  • Markdown
  • Mermaid
  • 开源协议
  • 毛选解读
  • 自我精进
  • 关于我
  • 自我精进
  • 职场管理
  • 职场面试
  • 心情杂货
  • 友情链接
  • README
  • 体系建设优化

    • 体系建设优化
    • 性能第一性原理
    • 指标与求证方法
    • 可观测性与归因
      • 01.可观测性三件套
        • 1.1 Metrics / Logs / Traces
        • 1.2 Profile:第四种信号
        • 1.3 四类信号的关系
      • 02.数据源的物理层级
        • 2.1 硬件层:PMU 与硬件计数器
        • 2.2 内核层:tracepoint / kprobe / eBPF
        • 2.3 运行时层:VM / GC / 调度钩子
        • 2.4 框架层:UI 框架回调与生命周期
        • 2.5 应用层:业务埋点
      • 03.采集方法学
        • 3.1 采样 vs 全量
        • 3.2 拉模式 vs 推模式
        • 3.3 在线 vs 离线
        • 3.4 侵入 vs 无侵入
      • 04.无侵入式钩子原理
        • 4.1 字节码 / 中间码插桩
        • 4.2 PLT/GOT Hook(C/C++ 动态库)
        • 4.3 Inline Hook 与 Method Swizzling
        • 4.4 浏览器 API 代理
        • 4.5 安全与稳定性边界
      • 05.采集数据的可信度
        • 5.1 测量原理:观察者效应
        • 5.2 时钟与时间戳陷阱
        • 5.3 采样偏差
        • 5.4 误差量化
      • 06.采集系统的成本控制
        • 6.1 性能开销预算
        • 6.2 采样降级策略
        • 6.3 上报与聚合
      • 07.跨平台采集对照
      • 一句话总结
      • 附录:05.归因方法与火焰图
      • 01.归因的两条路径
        • 1.1 自顶向下:从体感到代码
        • 1.2 自底向上:从热点到调用方
        • 1.3 何时用哪种
      • 02.关键路径分析
        • 2.1 关键路径的定义
        • 2.2 寻找关键路径的方法
        • 2.3 Amdahl 定律与优化天花板
      • 03.on-CPU 与 off-CPU 分析
        • 3.1 on-CPU:忙的归因
        • 3.2 off-CPU:等的归因
        • 3.3 wakeup 与因果链
      • 04.火焰图(Flame Graph)
        • 4.1 火焰图的构造原理
        • 4.2 火焰图的解读方法
        • 4.3 火焰图的变种
        • 4.4 常见误读
      • 05.归因决策树
        • 5.1 卡顿归因决策树
        • 5.2 内存增长归因决策树
        • 5.3 启动慢归因决策树
        • 5.4 网络慢归因决策树
      • 06.混淆变量识别
      • 07.归因案例演练
        • 案例:列表滚动严重掉帧(跨平台同构)
      • 一句话总结
    • APM与数据治理
    • 性能预算与防劣化
  • 代码品质工坊

  • 稳定性与可靠性

  • 工程化与运维

  • 方案设计思想

  • 性能优化实践

  • 真经
  • 体系建设优化
杨充
2026-06-27
目录

可观测性与归因

# 采集与可观测性原理

📊 学习成本预估 | 难度:⭐⭐⭐⭐(4/5)| 阅读:约 25 分钟 | 实操:1 小时 🔗 前置阅读:卷零·02 | ➡️ 后续延伸:卷一·01

性能工程的"地基"。没有可观测性,就没有性能工程。本文回答:"数据从哪里来?怎么采集?采得对不对?代价多大?"

# 目录介绍

  • 01.可观测性三件套
    • 1.1 Metrics / Logs / Traces
    • 1.2 Profile:第四种信号
    • 1.3 四类信号的关系
  • 02.数据源的物理层级
    • 2.1 硬件层:PMU 与硬件计数器
    • 2.2 内核层:tracepoint / kprobe / eBPF
    • 2.3 运行时层:VM / GC / 调度钩子
    • 2.4 框架层:UI 框架回调与生命周期
    • 2.5 应用层:业务埋点
  • 03.采集方法学
    • 3.1 采样 vs 全量
    • 3.2 拉模式 vs 推模式
    • 3.3 在线 vs 离线
    • 3.4 侵入 vs 无侵入
  • 04.无侵入式钩子原理
    • 4.1 字节码 / 中间码插桩
    • 4.2 PLT/GOT Hook(C/C++ 动态库)
    • 4.3 Inline Hook 与 Method Swizzling
    • 4.4 浏览器 API 代理
    • 4.5 安全与稳定性边界
  • 05.采集数据的可信度
    • 5.1 测量原理:观察者效应
    • 5.2 时钟与时间戳陷阱
    • 5.3 采样偏差
    • 5.4 误差量化
  • 06.采集系统的成本控制
    • 6.1 性能开销预算
    • 6.2 采样降级策略
    • 6.3 上报与聚合
  • 07.跨平台采集对照

# 01.可观测性三件套

# 1.1 Metrics / Logs / Traces

工业界共识的可观测性"三大支柱":

类型 含义 数据形态 典型用途 存储成本
Metrics 数值化指标,时间序列 时间戳 + 标签 + 数值 监控、告警、趋势 低
Logs 离散事件文本 时间戳 + 上下文 + 文本 故障复盘、调试 高
Traces 请求跨多个组件的执行路径 Trace ID + Span 树 分布式归因 中

三者关系:

Metrics(What 出问题了)
   │
   ▼
Traces(出问题在 哪个 链路环节)
   │
   ▼
Logs(出问题时 发生了 什么)

# 1.2 Profile:第四种信号

近年提出的第四类信号,专属于性能领域:

类型 含义 数据形态
Profiles 程序运行时函数级耗时 / 资源分布 调用栈 + 计数(如火焰图)

为什么需要 Profile:

  • Metrics 告诉你"CPU 100%",但不告诉你"哪个函数在烧 CPU"。
  • Logs 告诉你"渲染卡了",但不告诉你"哪行代码导致"。
  • Profile 把执行时间归因到代码行 / 函数 / 调用栈。

# 1.3 四类信号的关系

信号           粒度           回答的问题             代价
──────────────────────────────────────────────────────
Metrics       指标级         "怎样 / 多少?"         低
Logs          事件级         "发生过什么?"          中
Traces        请求级         "在哪一步发生?"        中
Profiles      函数级         "什么代码导致?"        高

性能工程的关键认知:四类信号必须互相关联才能形成完整归因链。一个完整的卡顿排查:

  1. Metric 告警:FPS P99 > 50ms
  2. Trace 定位:在 ListView 滚动期间发生
  3. Profile 归因:65% 时间花在 Bitmap.decodeStream
  4. Log 验证:当时图片 URL 是 4K 大图

单一信号无法解决问题。可观测性体系的设计目标,是让四类信号通过统一上下文(Trace ID / 用户 ID / 会话 ID)互相串联。

# 02.数据源的物理层级

性能数据存在于系统的不同层级,了解层级是设计采集方案的前提。

# 2.1 硬件层:PMU 与硬件计数器

CPU 内置 PMU(Performance Monitoring Unit),可统计:

  • Cycles(CPU 周期数)
  • Instructions(指令数)
  • Cache Miss(缓存未命中)
  • Branch Misprediction(分支预测失败)
  • TLB Miss

由 PMU 计算的关键指标:

IPC = Instructions / Cycles            (越高越好,Intel 一般 > 2 算优秀)
Cache Miss Rate = Misses / Accesses    (越低越好)

采集方式:

平台 工具
Linux(Android 嵌入式) perf_event_open / perf / simpleperf
macOS / iOS Instruments CPU Counters / sys_perf_event
Web 不可访问(沙箱限制)

意义:当 CPU 利用率高但任务推进慢时,PMU 数据能区分是 CPU bound 还是 memory bound(cache miss 严重)。

# 2.2 内核层:tracepoint / kprobe / eBPF

Linux 内核提供三种 tracing 机制:

机制 含义 用途
tracepoint 内核预埋的静态事件点 调度、IO、文件系统
kprobe / uprobe 动态插入的探针 任意函数入口 / 出口
eBPF 内核态可编程沙箱 灵活、低开销自定义采集

eBPF 的革命性:

  • 在内核态执行用户提供的程序,无须改动内核代码。
  • 开销极低(事件级),可生产环境长期运行。
  • Android 12+ 已内置 eBPF 支持,是新一代 APM 基石。

典型用途:

  • off-CPU 分析(线程在等什么)
  • IO 延迟分布
  • 系统调用归因
  • 内存分配追踪

# 2.3 运行时层:VM / GC / 调度钩子

各运行时提供性能事件回调:

运行时 关键钩子
Android ART GC 回调、ClassLoad、JIT 编译事件、Looper.setMessageLogging
iOS Objective-C/Swift Method Swizzling、os_signpost、Mach 消息
V8 (Web/Node) Performance Observer、v8.startProfiling、Heap Snapshot
.NET EventListener、ETW
嵌入式 RTOS OS hook(FreeRTOS trace)

采集示例:

  • Android:Choreographer.postFrameCallback 采集帧时钟
  • iOS:os_signpost_interval_begin/end 标记区间
  • Web:PerformanceObserver 监听 longtask / paint / largest-contentful-paint

# 2.4 框架层:UI 框架回调与生命周期

UI 框架本身暴露大量回调:

框架 关键回调
Android Activity / Fragment 生命周期、ViewTreeObserver、FrameMetrics
iOS UIViewController 生命周期、viewDidAppear、displayLink
React / Vue componentDidMount / mounted / Profiler API
Flutter WidgetsBinding.addObserver / Timeline

# 2.5 应用层:业务埋点

业务自身定义关键时刻(如"购买按钮点击 → 订单页可见")。

埋点设计四原则:

  1. 语义清晰:事件名表达业务含义,不依赖技术细节。
  2. 上下文完整:随事件携带页面、用户、版本、网络等元数据。
  3. 时钟一致:所有埋点使用同一时钟源(避免时间戳跨线程错乱)。
  4. 可演进:保留事件版本字段,便于口径变更追溯。

# 03.采集方法学

# 3.1 采样 vs 全量

模式 优点 缺点 典型场景
全量 数据完整、可精确归因 开销大、存储成本高 崩溃、关键事件
采样 开销小、可长期运行 偶发问题易遗漏 CPU profile、调用栈

采样的两种方式:

  • 时间采样(Time-based):固定周期触发(如每 10ms 抓一次栈),适合 CPU 分析。
  • 事件采样(Event-based):按特定事件(如每分配 100 次)抓栈,适合内存分析。

采样率与误差:

采样率越高 → 数据越准 → 性能开销越大

经验法则:
  生产环境 CPU profile 采样率:99Hz(每 ~10ms 一次)
  开销约:1-3%

# 3.2 拉模式 vs 推模式

模式 谁主动 适用
Pull 采集器主动读 /proc/stat、PerformanceObserver.getEntries
Push 被采集对象主动报 框架回调、埋点

端侧实践:

  • 短期高频指标(CPU%、内存)→ Pull(轮询)
  • 离散事件(崩溃、生命周期)→ Push(回调)

# 3.3 在线 vs 离线

模式 含义 用途
在线(Online) 设备运行时实时采集 + 上报 线上监控、告警
离线(Offline) 录制完整 trace 文件,事后分析 性能回归、深度分析

典型工具:

  • Android Perfetto / Systrace:录制完整系统级 trace
  • iOS Instruments:录制 .trace 文件
  • Chrome DevTools Performance:录制时间轴
  • 嵌入式 ftrace:录制内核 trace

实践组合:

  • 线上:轻量 Metrics + 异常时触发 Profile 录制 + 上报关键 Trace
  • 线下:在自动化测试场景下,强制录制完整 Trace 用于回归

# 3.4 侵入 vs 无侵入

模式 特点
侵入式 业务代码显式调用 SDK API,逻辑可见但维护成本高
无侵入式 通过钩子 / 插桩自动采集,业务无感

APM 的趋势是"无侵入式",但需要谨慎处理稳定性 / 兼容性问题(详见下一节)。

# 04.无侵入式钩子原理

无侵入采集是 APM 的核心技术。原理上分四类:

# 4.1 字节码 / 中间码插桩

在编译 / 加载阶段重写代码字节,插入采集逻辑。

平台 技术
Android Java ASM / Javassist / Transform API(Gradle Plugin)
Android Kotlin KSP / 编译器插件
iOS Swift SwiftSyntax / Sourcery(编译期)
Web Babel / SWC plugin、AST 改写

示例:监控所有 Activity.onCreate:

原方法:
  public void onCreate(Bundle b) { /* 业务 */ }

ASM 后:
  public void onCreate(Bundle b) {
    long __t = System.nanoTime();
    try { /* 业务 */ }
    finally { APMTracer.trace("onCreate", System.nanoTime() - __t); }
  }

优点:性能影响极小(编译期完成),覆盖完整。 缺点:增加构建时间,需维护版本兼容性。

# 4.2 PLT/GOT Hook(C/C++ 动态库)

Linux/Android 动态链接器使用 PLT/GOT 表寻址外部符号。修改 GOT 表即可拦截系统调用。

典型用途:

  • 监控 malloc/free 实现内存追踪
  • 监控 pthread_create 监控线程创建
  • 监控 open/read/write 实现 IO 追踪

代表实现:bytehook(字节)、xhook、bhook。

限制:

  • 仅对外部调用生效,对静态链接函数无效。
  • Android 7+ 后,部分动态库(libart 等)加固使 hook 难度增加。

# 4.3 Inline Hook 与 Method Swizzling

# Inline Hook(C/C++ 通用)

直接修改函数前几个字节为跳转指令,跳到代理函数。

特点:

  • 强大,可 hook 任意函数。
  • 危险,对 ABI / 架构高度敏感(ARM vs ARM64 vs x86 不同)。
  • 可能与系统 ASan、PAC(Pointer Authentication)冲突。

# Method Swizzling(Objective-C)

利用 OC 的动态消息机制,交换两个方法的实现指针:

原 Method A 的 IMP <─→ 新 Method A' 的 IMP

典型用途:

  • 全局监控 viewDidAppear 计算页面加载时间
  • 拦截 NSURLSession 计算网络耗时

限制:仅对 OC runtime 有效,纯 Swift 类无 dynamic 标记则无效。

# 4.4 浏览器 API 代理

Web 环境无法 hook 内核 / 二进制,但可代理 JS API:

// 拦截 fetch 计算网络耗时
const _fetch = window.fetch;
window.fetch = function (...args) {
  const start = performance.now();
  return _fetch.apply(this, args).finally(() => {
    APM.trace('fetch', performance.now() - start);
  });
};

典型代理目标:fetch、XMLHttpRequest、addEventListener、setTimeout、history.pushState。

# 4.5 安全与稳定性边界

无侵入 hook 是双刃剑,常见风险:

风险 案例 防御
兼容性崩溃 OS 版本变化导致符号偏移 多版本灰度 + 黑名单兜底
启动卡死 hook 自身耗时导致主线程长时间阻塞 hook 内严禁同步 IO / 锁
安全风险 hook 被恶意利用 / 触发系统加固检测 仅对自身进程内符号 hook
性能退化 全量 hook 高频函数(如 malloc) 按需开启 + 降采样

铁律:

Hook 越底层,威力越大,副作用也越大。生产环境的无侵入 SDK 必须满足"hook 失败不影响业务"的兜底原则。

# 05.采集数据的可信度

# 5.1 测量原理:观察者效应

任何测量都会扰动被测对象。性能领域尤其严重:

  • 打点本身耗时(几百 ns 到几 us)
  • 触发额外的内存分配
  • 引发额外上下文切换
  • 改变 JIT 优化决策

经验数据:

采集方式 单次开销 适合场景
计数器累加 < 100ns 高频路径
nanoTime 时间戳 ~50-200ns 区间测量
调用栈采样(不展开) ~1-10us 偶发采样
调用栈展开 + 符号化 ~100us-1ms 离线分析
内存分配 trace ~500ns / 次 限频开启

# 5.2 时钟与时间戳陷阱

# 单调时钟 vs 墙钟

时钟 特点 用途
墙钟(Wall Clock) 可被用户 / NTP 调整 显示日期
单调时钟(Monotonic) 只增不减 性能区间测量 ✅

铁律:性能区间测量必须用单调时钟:

  • Android:SystemClock.elapsedRealtimeNanos() / System.nanoTime()
  • iOS:mach_absolute_time() / CACurrentMediaTime()
  • Web:performance.now()
  • C/C++:clock_gettime(CLOCK_MONOTONIC)

❌ 用 System.currentTimeMillis() 测耗时是常见错误。NTP 调时会让你测到负数。

# 跨核 / 跨线程时间戳

不同 CPU 核心的 TSC 可能不同步。多线程时间戳直接对比可能错乱。

对策:

  • 在同一线程上打点,跨线程用消息传递时间戳。
  • 使用系统提供的同步时钟 API(多数现代 OS 已抽象)。

# 5.3 采样偏差

偏差类型 描述 例子
选择偏差 仅采集到部分场景 只采集前台启动,漏掉后台拉起
生存偏差 仅采集"未崩溃用户" 排除 OOM 用户 → 内存数据偏低
时间偏差 采集时机不均匀 凌晨用户少、网络好 → 数据偏好
设备偏差 高端机用户多 → 整体数据偏好 必须按机型切片

对策:

  • 采集前定义"采集口径",并文档化。
  • 多维度切片(机型 / 网络 / 时段 / 版本)后再聚合。
  • A/A 实验验证采集本身无偏。

# 5.4 误差量化

任何采集都应附带误差范围。例如:

冷启动 P95 = 1.82s ± 0.04s(95% CI, n=12000, 采样率 100%)
帧时长 P99 = 23.5ms ± 0.8ms(n=8000, 采样率 100Hz)

误差未声明的指标 = 不可信指标。

# 06.采集系统的成本控制

# 6.1 性能开销预算

APM SDK 的健康开销:

维度 经验阈值
CPU 开销 < 1%(高频)/ < 3%(profile 期间)
内存常驻 < 5MB
内存峰值(dump 时) < 30MB
启动耗时 < 30ms
包体积 < 500KB
上报流量 < 50KB / DAU / 天

超过预算的 APM 是问题,不是解药。

# 6.2 采样降级策略

设备压力大时,APM 应主动降级:

正常态:全量采集帧时长 + 99Hz CPU 采样
压力态:仅采集异常帧 + 关闭 CPU 采样
极端态:只保留崩溃 / ANR 采集

触发条件:

  • 内存压力(onTrimMemory / didReceiveMemoryWarning)
  • CPU 持续高占用
  • 电量低于阈值
  • 用户主动开启省电模式

# 6.3 上报与聚合

阶段 优化点
本地聚合 客户端先做 直方图 / 计数,避免上报原始事件
批量上报 累积到一定量或定时上报,避免高频网络
压缩 gzip / protobuf,文本日志可减小 70%
网络感知 WiFi 优先、弱网降频
时序保序 上报失败重试时保持事件顺序,便于复盘
去重 同一事件多次上报需具备幂等键

# 07.跨平台采集对照

信号 / 场景 Android iOS Web 嵌入式 (Linux)
CPU 利用率 /proc/[pid]/stat host_processor_info Long Tasks API(粗) /proc/stat
线程级 CPU /proc/[pid]/task/[tid]/stat thread_info 不可见 /proc/[pid]/task
内存 RSS/PSS /proc/[pid]/status, smaps task_vm_info 不可见(隔离) /proc/[pid]/status
帧时钟 Choreographer / FrameMetrics CADisplayLink / MetricKit requestAnimationFrame / PerformanceObserver(frame) 显示控制器 IRQ
系统 trace Perfetto / Systrace / atrace os_signpost + Instruments DevTools Performance ftrace / lttng
函数 profile simpleperf / perf Time Profiler / dtrace DevTools Profiler perf / pprof
调用栈采样 Thread.getStackTrace / unwind backtrace Profiler API libunwind
内存分配追踪 Allocation Tracker / bytehook malloc Allocations Instrument Allocation Profiler tcmalloc / jemalloc
崩溃捕获 setUncaughtExceptionHandler + 信号 Mach exception + 信号 window.onerror signal / sigaction
ANR / 卡顿 Watchdog 线程 + signalQUIT RunLoop observer + Watchdog Long Tasks > 50ms 心跳超时
网络拦截 OkHttp Interceptor / 代理 URLProtocol swizzle fetch / XHR 代理 自定义
GC 事件 ART trace ARC(无 GC) PerformanceObserver(gc) —
eBPF Android 12+ 部分支持 不开放 不可访问 完整支持 ⭐

# 一句话总结

可观测性的本质,是用最小的扰动获取最大的可解释性。
设计采集系统时,永远问三个问题:采的对吗?采的全吗?采的代价值吗?


# 附录:05.归因方法与火焰图

# 归因方法论与火焰图解读

📊 学习成本预估 | 难度:⭐⭐⭐⭐⭐(5/5)| 阅读:约 30 分钟 | 实操:3 小时 🔗 前置阅读:卷零·01-04 | ➡️ 后续延伸:卷二·01, 卷三·03

采集到数据,下一步是归因:从"知道慢"走到"知道为什么慢"。本文给出一套跨平台通用的归因路径与火焰图解读方法。

# 目录介绍

  • 01.归因的两条路径
    • 1.1 自顶向下:从体感到代码
    • 1.2 自底向上:从热点到调用方
    • 1.3 何时用哪种
  • 02.关键路径分析
    • 2.1 关键路径的定义
    • 2.2 寻找关键路径的方法
    • 2.3 Amdahl 定律与优化天花板
  • 03.on-CPU 与 off-CPU 分析
    • 3.1 on-CPU:忙的归因
    • 3.2 off-CPU:等的归因
    • 3.3 wakeup 与因果链
  • 04.火焰图(Flame Graph)
    • 4.1 火焰图的构造原理
    • 4.2 火焰图的解读方法
    • 4.3 火焰图的变种
    • 4.4 常见误读
  • 05.归因决策树
    • 5.1 卡顿归因决策树
    • 5.2 内存增长归因决策树
    • 5.3 启动慢归因决策树
    • 5.4 网络慢归因决策树
  • 06.混淆变量识别
  • 07.归因案例演练

# 01.归因的两条路径

任何性能问题的归因,都可走两条互补的路径。

# 1.1 自顶向下:从体感到代码

用户感知(卡 / 慢)
   │  APDEX / Web Vitals
   ▼
请求级(哪类操作慢)
   │  RED 模型
   ▼
资源级(哪种资源饱和)
   │  USE 模型
   ▼
线程 / 进程级(哪个线程在做什么)
   │  off-CPU / on-CPU 分析
   ▼
函数级(哪个函数在烧 CPU / 在等待)
   │  火焰图 / Profile
   ▼
代码行

适用:从一个用户感知问题出发,尚未知道根因。

# 1.2 自底向上:从热点到调用方

函数 A 占 CPU 30%
   │
   ▼
被谁调用?(caller stack)
   │
   ▼
是否在关键路径?是否可消除?

适用:已经看到一个明显热点(如某 API 调用占 30% CPU),想确认它是否真的有害。

# 1.3 何时用哪种

场景 推荐路径
用户报"卡顿" / 监控告警 自顶向下
Profile 出明显热点 自底向上
偶发问题、原因不明 自顶向下,配合 trace
复盘已知问题 自底向上更直接

专家的常态是两条路同时走:自顶向下定位"层",自底向上找到"点",在中间相遇。

# 02.关键路径分析

# 2.1 关键路径的定义

借用项目管理的概念。在性能上下文中:

关键路径(Critical Path):从"输入触发"到"用户感知完成",决定整体时长的最长依赖链。

示例(启动):

进程创建 ──▶ Application.onCreate ──▶ MainActivity.onCreate ──▶ 首屏 layout ──▶ 首屏 draw
                  │                          │
                  └─ 异步初始化(不在关键路径上)

只有关键路径上的耗时才影响用户感知;非关键路径的优化对体感无益。

# 2.2 寻找关键路径的方法

# A. Trace 时间轴分析

录制完整 trace(Perfetto / Instruments / DevTools),找到主线程上首尾相连的一系列任务,即为关键路径。

# B. 依赖图分析

把所有任务画成 DAG,节点为任务,边为依赖。关键路径 = DAG 上的最长路径。

# C. 反推法

从终点(首帧上屏)反向追问"它在等什么",直到追到起点。

# 2.3 Amdahl 定律与优化天花板

              1
S = ───────────────────────
      (1 - p) + p / s

S:整体加速比
p:可加速部分占比
s:该部分的加速比

例子:

  • 启动总耗时 1000ms,其中数据库初始化 400ms。
  • 把数据库初始化优化到 100ms(4× 加速)。
  • 整体提升 = 1000 / (600 + 100) = 1.43×(即从 1000ms 到 700ms)。

核心洞察:

  • 优化收益的天花板 = 该部分占比。占比 5% 的代码优化到 0,整体最多提升 5%。
  • 应优先优化占比最大的关键路径。
  • 当某段已被优化到极致,剩余部分的 p 增大,需要重新评估优先级。

# 03.on-CPU 与 off-CPU 分析

# 3.1 on-CPU:忙的归因

on-CPU:线程实际占用 CPU 时间。

采集:周期性采样调用栈(如 99Hz),统计各栈出现频率。

适用:定位"CPU 在烧什么"。

典型工具:

  • Linux/Android:perf / simpleperf
  • macOS/iOS:Instruments Time Profiler
  • Web:DevTools Performance / Profiler API
  • 嵌入式:perf / gprof

# 3.2 off-CPU:等的归因

off-CPU:线程因等待(IO / 锁 / 信号)而被调度出 CPU 的时间。

这是性能优化中最容易被忽视的部分:

  • 用户感觉卡,但 CPU 不高 → 大概率是 off-CPU 问题。
  • 主线程总耗时 100ms,其中 on-CPU 仅 30ms,剩余 70ms 全在等。

典型 off-CPU 来源:

来源 例子
磁盘 IO 读 SharedPreferences / 大文件
网络 IO 同步请求
锁等待 synchronized / mutex 竞争
跨线程同步 wait/notify、Future.get
跨进程通信 Binder / IPC
GC 等待 Stop-The-World

采集:

  • Android:atrace 配合 sched_switch tracepoint,或 eBPF
  • iOS:Instruments System Trace
  • Web:DevTools Performance(蓝色 idle / 黄色 task)

# 3.3 wakeup 与因果链

off-CPU 时间内,线程在等"被谁唤醒"。找到唤醒者,就找到了因果链。

线程 A:等锁 ───────── (off-CPU 50ms)─────── 拿到锁,继续
                                  ▲
                                  │ wakeup
线程 B:持有锁 ───── 释放锁 ──────┘

Linux 的 sched_wakeup tracepoint 可记录唤醒关系,是高级归因的核心。eBPF 工具如 offcputime 能直接产出 off-CPU 火焰图。

实战意义:当卡顿发生时,主线程 off-CPU 50ms,找到唤醒者是某个 Binder 线程在等远程进程返回,归因瞬间清晰。

# 04.火焰图(Flame Graph)

由 Brendan Gregg 发明,是性能归因最重要的可视化工具。

# 4.1 火焰图的构造原理

输入:大量调用栈样本(每个样本是从根到叶的栈帧序列 + 计数)。

构造:

  1. 把所有栈对齐根部、合并相同前缀。
  2. 横轴:合并后的"宽度"= 出现次数(耗时占比)。
  3. 纵轴:栈深度。
  4. 每一格 = 一个栈帧,宽度 = 该函数(含被调用的子函数)总耗时。

关键约定:

  • 宽度有意义:越宽 = 越耗时。
  • 横轴顺序无意义:通常按函数名字典序排列。
  • 颜色无意义:通常随机,便于区分(部分变种用颜色编码语言层)。
          [main]                       <- 根,宽度 = 100%
           │
   ┌───────┼─────────┐
[init][render][network]                <- 子函数,宽度反映耗时占比
   │      │
[gc][layout][raster]
       │       │
   [measure][gpu_submit]               <- 越往上越是底层 / 叶子函数

# 4.2 火焰图的解读方法

# 五个看点

看点 解读
宽柱顶端 该函数自身耗时大("平顶"),是优化重点
宽且分叉 该函数耗时由多个子函数贡献,需逐个看
窄但深 调用链很深但总耗时不高,关注是否有冗余调用
重复出现的栈 同一函数在多处出现,可能是热点工具方法
意外的栈 不应出现在该路径的函数(如 UI 线程出现 IO)

# 关键问句

1. 宽度最大的"平顶"是谁?  → 自身耗时最高的函数
2. 它是预期的吗?           → 业务必要 vs 可优化
3. 它能被消除 / 减少 / 异步化吗?
4. 它的 caller 在关键路径上吗?

# 4.3 火焰图的变种

类型 用途
on-CPU Flame Graph 默认,看 CPU 时间分布
off-CPU Flame Graph 看等待时间分布,定位 stall 问题
Differential / Diff 对比两个版本的火焰图,红色 = 退化,蓝色 = 改善
Memory Flame Graph 横轴 = 分配字节数,定位内存热点
Allocation Flame Graph 横轴 = 分配次数,定位频繁分配
Wakeup Flame Graph 显示唤醒因果,归因 off-CPU
Inverted Flame Graph (Icicle) 倒过来,从根看向叶

Differential Flame Graph 的威力:发布前后跑一次,红色部分一目了然 —— 回归排查神器。

# 4.4 常见误读

# 误读 A:把"宽"当成"慢的原因"

真相:宽 = 耗时占比高,但不一定是"问题"。

  • 一个 App 必然要做的事(如 layout)就是宽的,不代表它有问题。
  • 重点看:是否过宽(大于业务必要程度)。

# 误读 B:忽略 off-CPU

仅 on-CPU 火焰图看不到等待。卡顿很多源于 off-CPU。

# 误读 C:误以为高度代表耗时

高度只代表栈深度,不代表耗时。永远只看宽度。

# 误读 D:被采样率欺骗

低采样率下,火焰图可能漏掉短任务。结论需结合采样率与样本量。

# 05.归因决策树

下面给出 4 个最常见性能问题的决策树。遇到对应问题时,按树走一遍。

# 5.1 卡顿归因决策树

单帧 > 16.67ms 出现
   │
   ├── on-CPU 占主导?─── Yes ──► 火焰图找平顶
   │                            │
   │                            ├─ 业务计算 → 算法 / 异步化
   │                            ├─ 渲染计算 → 减少视图层级 / 减少重绘
   │                            ├─ 内存分配密集 → 对象池 / 复用
   │                            └─ 解码 / 压缩 → 异步 / 缓存
   │
   └── off-CPU 占主导?── Yes ──► off-CPU 火焰图 + wakeup 链
                                │
                                ├─ IO Wait → 异步 / 缓存
                                ├─ 锁等待 → 减少临界区 / 无锁数据结构
                                ├─ Binder/IPC → 批量 / 缓存远端结果
                                ├─ GC 停顿 → 减少分配 / 降低内存压力
                                └─ Page Fault → mmap 预热 / 减少冷数据

# 5.2 内存增长归因决策树

内存持续增长
   │
   ├── 增长是否随业务功能开关?──► 关闭 X 后不再增长 = X 是源头
   │
   ├── 是 Java/Heap 增长?─── Yes ──► Heap dump → 支配树
   │                                │
   │                                ├─ 单类对象数异常 → 泄漏
   │                                ├─ Bitmap 占大头 → 图片缓存策略
   │                                └─ String 占大头 → 字符串拼接 / 重复
   │
   ├── 是 Native 增长?──── Yes ──► malloc trace / hprof
   │                                │
   │                                ├─ 第三方 SO 库 → SO 内泄漏排查
   │                                └─ JNI 引用未释放 → GlobalRef 检查
   │
   └── 是匿名映射 (mmap)?  Yes ──► smaps 分析
                                  │
                                  └─ 大段匿名 mmap → 检查 NIO Buffer / 文件映射

# 5.3 启动慢归因决策树

冷启动 > 目标值
   │
   ├── 进程创建到 onCreate 慢?─► dex 加载 / SO 加载 / 类预热
   │
   ├── Application.onCreate 慢?─► 同步初始化项目 → 异步化 / 懒加载
   │
   ├── Activity 首帧前慢?─────► 主线程被阻塞?或视图层级过深?
   │
   └── 首帧到 TTI 慢?────────► 主线程被业务请求阻塞 → 关键路径分析

# 5.4 网络慢归因决策树

请求耗时 P95 高
   │
   ├── DNS 时间长?──────► DNS 缓存 / HTTPDNS
   │
   ├── Connect 时间长?──► 长链接 / 连接复用
   │
   ├── TLS 时间长?─────► Session Resumption / TLS 1.3 / 0-RTT
   │
   ├── TTFB 长?───────► 服务端慢 / 弱网 / 队头阻塞 → HTTP/2、HTTP/3
   │
   └── Body 下载慢?───► 弱网 / Body 过大 → 压缩 / 分片 / CDN

# 06.混淆变量识别

归因最容易被混淆变量误导。识别清单:

混淆 表现 真因
时间序列偏差 改完代码后下午测,比上午快 设备温度差异(降频)
缓存效应 第二次跑都快 OS Page Cache、JIT 编译、磁盘 cache
测试数据偏差 测试集小 / 单一 真实分布不同
平台版本偏差 仅在某 OS 版本上慢 OS 自身问题,非业务问题
后台干扰 偶发慢 后台任务抢占资源
Profiler 自身影响 加上 profiler 后慢 5 倍 工具开销,不是真实情况

对策:

  • 至少做 2 台同型号、不同测试者的独立验证。
  • 切片分析(按时段 / 网络 / 系统版本)。
  • 区分 profile 模式与生产模式数据。

# 07.归因案例演练

# 案例:列表滚动严重掉帧(跨平台同构)

现象:

  • Android:单帧 P99 = 48ms(应 < 16ms),FPS 平均 42。
  • iOS:相同列表,单帧 P99 = 38ms。
  • Web:相同列表,单帧 P99 = 55ms。
  • 三端皆有问题,但程度不同。

自顶向下走一遍:

# Step 1 - APDEX

体感差,确实是性能问题,进入度量。

# Step 2 - RED

慢的是哪类操作?滚动单帧(duration)。错误率正常。

# Step 3 - USE

  • CPU 占用:Android 65%、iOS 50%、Web 70%。
  • IO Wait:低。
  • 内存正常。
  • → 不是资源饱和问题。

# Step 4 - on-CPU vs off-CPU

  • Android 主线程 on-CPU 70%,off-CPU 30%。
  • iOS 主线程 on-CPU 75%,off-CPU 25%。
  • Web 主线程 on-CPU 85%。

→ 主要是 on-CPU 问题。off-CPU 还有一段,需查。

# Step 5 - 火焰图

三端火焰图共同特征:

[ScrollView/ListView/UICollectionView/IntersectionObserver Scroll]
    │
    └── [bindViewHolder / cellForRow / render]
            │
            ├── [Bitmap.decode / UIImage init / Image decode]   ← 平顶 30%
            ├── [setText / NSAttributedString / innerHTML]      ← 平顶 20%
            └── [layout / autolayout / reflow]                  ← 平顶 25%

# Step 6 - 跨平台同构归因

层 三端共性根因
应用 列表项含大图,滚动时同步解码
应用 文本富文本布局复杂
运行时 滚动频繁触发 Layout,无缓存复用
系统 滚动期间需保持 60fps,主线程预算极紧

# Step 7 - 平台特异

平台 额外因素
Android RecyclerView ViewHolder 复用率低(不同 itemType 太多)
iOS 自动布局约束嵌套深,触发多次 layoutSubviews
Web 布局抖动(read/write 交替触发 reflow)

# Step 8 - 跨平台通用治理 + 平台特化

通用治理(适用三端):

  1. 图片预解码(IO 线程) + 内存缓存。
  2. 富文本渲染结果缓存。
  3. 视图复用率监控(要求复用率 > 90%)。

平台特化:

  • Android:itemType 收敛到 ≤ 3 种;启用 Prefetch。
  • iOS:用 frame 布局替代约束(极致场景);预排版。
  • Web:DOM 操作分批,避免 layout thrashing。

# Step 9 - 求证(详见《03.求证方法论》)

通用 + 特化方案上线后:

平台 P99 帧时长前 后 改善
Android 48ms 17ms -65%
iOS 38ms 14ms -63%
Web 55ms 20ms -64%

关键洞察:通用治理贡献了 70%+ 改善,平台特化贡献 30%。这印证了"原理跨端通用,差异只是实现"的核心命题。

# 一句话总结

归因不是猜,而是按路径走。
自顶向下定位"层",自底向上定位"点",在火焰图上相遇。

上次更新: 2026/06/28, 17:55:19
指标与求证方法
APM与数据治理

← 指标与求证方法 APM与数据治理→

最近更新
01
科学方法实践论法
06-28
02
辩证思维矛盾论法
06-28
03
毛选中的调查观念
06-28
更多文章>
Theme by Vdoing | Copyright © 2019-2026 杨充 | MIT License | 鄂ICP备2024073355号-1 | 鄂ICP备2024073355号
  • 跟随系统
  • 浅色模式
  • 深色模式
  • 阅读模式