invariant TSC 校准:频率标定与跨核一致性验证的完整套路
承 rdtsc 与 invariant TSC 同步机制 对 TSC(Time Stamp Counter,时间戳计数器)硬件语义的拆解,以及 APIC TSC-deadline 定时器 对「以 TSC 为基准的定时」的介绍。硬件保证 invariant TSC「不随变频停摆」,但要把它当墙钟用,还差两步:知道它每秒跳多少下(频率标定),以及确认所有核跳的是同一条时间线(跨核一致性)。这两步合起来就是 invariant TSC 校准。
本文要回答的问题
- invariant TSC 的频率是固定的,为什么内核还要「校准」它?
- 内核启动时用哪些参考时钟给 TSC 定频,误差有多大?
- CPUID 直接给出频率的新机制,哪些 CPU 支持,值可信吗?
- 怎么用 rdtsc 配对采样实测跨核偏移,偏移多少算「同步」?
- 用户态拿 TSC 当高精度时钟,校准数据从哪里拿?
一、为什么 invariant 了还要校准
invariant TSC 的承诺只有两条:频率恒定(不随 C-state、P-state 变化),以及同一系统内所有核以同一频率递增。它没有承诺频率的具体数值——TSC 频率由厂商在熔丝或固件里设定,常见值从 1 GHz(老 Atom)到 3.5 GHz 不等,甚至同一型号不同批次都可能不同。
而内核和用户态要的是「秒」。clock_gettime(CLOCK_MONOTONIC) 背后是「TSC 差值 ÷ 频率」,频率错 1%,所有时间间隔错 1%。更隐蔽的是跨 socket 场景:两颗 CPU 标称同频,实际晶振偏差 50 ppm(百万分之五十),一小时就漂出去 180 毫秒。所以 invariant TSC 校准解决的是两个独立问题:
| 问题 | 不校准的后果 | 校准手段 |
|---|---|---|
| 频率是多少 | 时间间隔整体按比例失真 | PIT/HPET/PMTMR 对标,或 CPUID 叶子 |
| 多核是否对齐 | 跨核读时间戳出现「时间倒流」 | 启动时同步 + 运行时偏移检测 |
两个问题分开验证,一个通过不代表另一个没问题。
二、内核的频率标定:拿慢钟量快钟
标定思路很朴素:用一个已知频率的慢时钟,量出「慢钟走了 N 个 tick 期间 TSC 涨了多少」,除法出频率。内核 native_calibrate_tsc() 按优先级尝试四个参考源:
- CPUID 叶子 0x15/0x16:硬件直接报频率,无需测量(详见下节)。
- PMTMR(ACPI 电源管理定时器,3.579545 MHz):读两个时间点各采一对 PMTMR+TSC,间隔约 50 ms。
- HPET(高精度事件定时器,常见 14.318 MHz 或更高):同上套路,精度更好。
- PIT(8254 可编程间隔定时器,1.193182 MHz):最古老兜底,精度最差。

这张图的重点在取舍逻辑:能问硬件就不测量,必须测量就用尽可能快的参考钟。为什么频率低的参考源误差大?标定窗口固定约 50 ms,PIT 一个 tick 是 838 ns——TSC 读数本身有几十周期的抖动,除以 50 ms 窗口,PIT 的量化误差大约是 ±0.002%,听着小,但折到 2.5 GHz TSC 上是 ±50 kHz,足够让精细的 NTP 驯服过程多收敛好几轮。HPET/PMTMR 把这个误差压一个数量级,CPUID 叶子则直接归零测量误差。
三、CPUID 叶子:厂商直接告诉你答案
Skylake 之后的 Intel CPU 基本支持 CPUID 叶子 0x15,直接返回三个数:分母、分子、晶振频率(ART,Always Running Timer 的基准晶振,通常 24 MHz 或 25 MHz)。TSC 频率 = 晶振频率 × 分子 ÷ 分母。叶子 0x16 则直接给基频 MHz 值。内核优先信 0x15,dmesg 里那行 tsc: Detected 2500.000 MHz processor 多半就是这么来的。
两点注意:一是 0x15 的晶振频率字段在部分早期 Skylake 上报 0,内核有按型号硬编码的查表兜底;二是虚拟机里 hypervisor 可以伪造这些叶子——云主机上 TSC 频率是 vCPU 模拟语义的一部分,换宿主可能换值,别以为抓一次就终身有效。
实测验证这个值也不难:用户态跑 rdtsc 前后各取一次 clock_gettime(CLOCK_MONOTONIC_RAW),间隔 sleep 1 秒,TSC 差值除以 CLOCK_MONOTONIC_RAW 的纳秒差值,得到的频率与内核报的 tsc_khz 误差应在万分之一以内。差得离谱说明 VDSO 的换算常数和真实 TSC 对不上——多半是虚拟化层做了手脚,这时任何依赖 TSC 绝对频率的计算都要打问号。
四、跨核一致性验证:rdtsc 配对采样
频率对了,再看对齐。判定「核 A 与核 B 的 TSC 是否同步」的经典方法是配对采样:两个线程分别绑在两个核上,用共享内存做接力——A 写自己的时间戳,B 立即读自己的时间戳,算差值;再反向做一次消除单向延迟偏差,取多次最小值作为偏移估计。
// 思路示意:shm 为共享 cacheline
*shm = rdtsc(); // 核 A 写
t_b = rdtscp(); // 核 B 立即读
offset = t_b - *shm; // 含传输延迟,取 min 逼近真值内核启动时做的 check_tsc_sync_source/target 本质是同一件事,用 smp_callin 在目标核上采样。判定阈值不是零:跨 cacheline 传输本身要 50-200 周期,实测裸机同 socket 偏移通常在几十到几百周期(2.5 GHz 下约 10-100 ns)即判「同步」;跨 socket 大几百周期也属正常,靠启动时的 IA32_TSC_ADJUST MSR 回写修正。

这张图里最容易被误读的是「取 min」那一步:单次测量必然混入缓存未命中、中断抢占的噪声,这些噪声只会增大观测差值,不会减小——所以多轮取最小值是在逼近真实偏移,而不是作弊。实测时建议跑一万轮以上,min 稳定后基本不再下降。
什么情况会测出「不同步」?三类:老主板多路系统上电时序不齐(BIOS 没做 TSC 同步);有核被 IA32_TSC_ADJUST 写过但值不一致(某些固件 bug 或恶意 hypervisor);虚拟化迁移后 vCPU 的 TSC offset 突变。内核检测到不同步会在 dmesg 打 tsc: Marking TSC unstable,并把 clocksource 降级到 HPET——时间戳还在,但 vDSO 快路径没了,clock_gettime 从约 25 ns 涨到几百纳秒。
五、用户态怎么用校准结果
用户态自己拿 rdtsc 当高精度时钟时,别重新标定——直接用内核的结果:
- 频率:读
dmesg的Detected ... MHz,或/sys/devices/system/clocksource/clocksource0/配合内核换算常数;更稳的做法是自己用clock_gettime对 rdtsc 做一次用户态标定(睡眠 10 ms 两端各采样,误差约几十 ppm)。 - 单调性:确认
/sys/devices/system/clocksource/clocksource0/current_clocksource是tsc,说明内核已替你验证过频率与跨核一致性。 - 序列化:
rdtscp带部分序列化,rdtsc不带,配lfence防乱序重排,细节见 rdtsc 与 invariant TSC 同步机制。
还有一个实战提醒:容器里跑 rdtsc 基准,先确认宿主的 invariant TSC 校准结论能穿透——多数云厂商保证 guest 内 TSC 同步,但跨 vCPU 偏移的实测值可能比裸机大一个数量级,拿裸机的阈值去套会误报。
最后说一个容易忽略的成本权衡:既然 TSC 校准与同步这么繁琐,为什么内核还坚持用 tsc 做默认 clocksource?因为读它便宜——rdtsc 二十几个周期、VDSO 里纯用户态换算,而 HPET 每次读都要走 MMIO 访存,单次几百纳秒起步。一次系统调用里可能有好几处时间戳采样,clocksource 换成 HPET 等于给所有计时路径加十倍税。所以「校准麻烦但校准一次终身受益」正是 invariant TSC 存在的原因:硬件保证不变,软件一次性把频率与对齐验清楚,之后全系统享受近乎免费的高精度时间。
这一篇在知识体系里的位置
本篇是 rdtsc 与 invariant TSC 同步机制 的校准实操篇;定时器侧的消费方见 APIC TSC-deadline 定时器;变频与 TSC「invariant」语义的关系见 DVFS 频率切换延迟 与 CPU 功耗频率管理;时钟门控对计数器的影响见 微架构时钟与功耗门控。
总结
invariant TSC 校准 = 定频 + 对齐两件事:内核用 CPUID 叶子优先、PMTMR/HPET/PIT 对标兜底的层级流程标出频率写进 tsc_khz,再用配对采样验证跨核偏移、必要时写 IA32_TSC_ADJUST 修正;验证全部通过,clocksource 才落在 tsc 上,用户态才能放心拿 rdtsc 当纳秒级时钟用——频率错了时间按比例失真,对齐坏了时间直接倒流,两者都得验。