RUM vs Synthetic Monitoring:如何将监控成本从 640 美元/月降至 0 美元/月

4 款 SaaS 应用的真实生产数据。RUM 与合成监控的取舍、供应商对比,以及我们实现 0 美元/月的完整技术栈。

Huifer
Huifer
September 11, 202610 min read
其他语言:Deutsch · English

本文由 Huifer 撰写,TanStack Ship 的独立开发者兼维护者。过去 9 个月,我在四款生产环境 TanStack Start 应用上并行运行了两种技术栈——一款面向约 3400 名客户的 B2B 计费仪表板、一款多租户分析工具、一款开发者仪表板,以及一个 marketplace。合成监控技术栈(Datadog RUM + Synthetics + Logs)在生产流量下的费用为每月 640 美元;RUM 技术栈(Cloudflare Analytics Engine + Web Vitals + Sentry 免费版)的费用为每月 0 美元,且在同一时间段内捕获了合成监控遗漏的 3 次回归。本文包含成本明细、盈亏平衡计算、我进行的供应商对比,以及 TanStack Ship 默认集成的完整技术栈。

经过验证的来源:web.dev — 定义 Core Web Vitals 指标 · web.dev — INP · Chrome for Developers — Web Vitals · MDN — PerformanceObserver · Cloudflare Analytics Engine · Cloudflare Workers Analytics Engine SQL API · Sentry pricing · Datadog RUM pricing

最后更新:2026-09-11 · 更新日志


TL;DR: 合成监控告诉你的是实验室性能是否稳定;RUM 告诉你的是 p75 用户实际上是否在遭受痛苦。2026 年,我在四款生产环境 TanStack Start SaaS 应用上并行运行了两种技术栈。合成技术栈(Datadog RUM + Synthetics + Logs)在日均 120 万事件下的费用为每月 640 美元。RUM 技术栈(Cloudflare Analytics Engine + web-vitals + Sentry 免费版)费用为每月 0 美元,且在同一时间段内捕获了合成监控遗漏的 3 次生产环境回归——原因是合成测试无法模拟真实用户在精确设备类别、网络类别和地理位置组合下的实际访问。面向日均 10 万事件以下的 SaaS 创始人,RUM 技术栈是正确的起点,已预接好并默认集成于 TanStack Ship。有关实现方式的并排对比,请参见 RUM 配套文章。有关 RUM 所测量的 Core Web Vitals 阈值,请参见 CWV 实践手册 和 CLS/INP 专项修复。


RUM vs Synthetic Monitoring:4 款 TanStack Start SaaS 应用的 0 美元 vs 640 美元/月真实成本数据

合成监控的卖点很清晰:同一台机器、同一网络、同一浏览器、同一脚本,每晚运行一次,告诉你是否有任何回归。RUM 的卖点则更复杂:从生产环境的真实用户那里收集指标,按设备和地理位置分段,告诉你 p75 用户实际体验到了什么。对 SaaS 创始人来说,真正的问题是:先上哪个,成本多少,以及当你不再需要廉价方案时盈亏平衡点在哪里。我在 2025–2026 年期间用四款生产应用并行运行了两种技术栈历时 9 个月。以下是具体数据。

合成监控实际能捕获什么(以及遗漏什么)

合成监控是一项受控实验。测试运行器从已知数据中心在限速移动 4G 配置下加载页面,运行等效于 Lighthouse 的审计并返回报告。在 B2B 计费应用上,合成监控任务连续 9 个月报告 p75 LCP 为 1.2s,p75 INP 为 110ms,p75 CLS 为 0.02。

合成监控捕获了 3 次真实回归:

  • 营销页面新增了一个第三方聊天小部件。合成监控在次日夜间运行中捕获了 +47KB 的 JS 回归,距离部署 14 小时后才发现。修复:在首次交互后才加载该小部件。
  • 定价页面的 A/B 测试将主图从 WebP 改为 AVIF,但没有显式设置尺寸。合成监控在次日夜间运行中捕获了 CLS 回归,14 小时后才检测到。修复:添加 width 和 height 属性。
  • 仪表板路由新增了一个图表库,导致 gzip 后 JS 包从 71KB 膨胀到 138KB。合成监控在次日夜间运行中捕获了 LCP 回归,14 小时后才检测到。修复:在悬停时动态导入图表库。

合成监控全部捕获了这三次回归,因为它们都是影响合成测试环境的部署变更。但合成监控遗漏了更重要的 4 次回归:

  • 巴西地区 INP 从 110ms 飙升至 380ms,原因是 Cloudflare 圣保罗 POP 的冷启动问题。合成监控仅从 US-East 运行。
  • 分析仪表板上中端 Android 设备 INP 回归,原因是服务器端查询返回了 4200 行数据,而非合成测试所模拟的 800 行。合成监控仅测试了模拟数据集。
  • 开发者仪表板 CLS 尖峰,发生在开启了 Chrome"减少动态效果"无障碍设置的用户中。合成监控从未切换过该设置。
  • Cloudflare 路由表变更后 EU 地区 TTFB 尖峰。合成监控从 US-East 运行。

合成监控无法告诉你任何测试运行器未配置去模拟的设备类别、地理位置、网络类别或无障碍设置方面的回归。这正是 RUM 的用武之地。

RUM 实际能捕获什么(以及遗漏什么)

RUM 从真实用户在真实设备、真实网络上的访问中收集指标。在四款应用中,RUM 技术栈在数小时内就捕获了合成监控遗漏的 4 次回归:

  • 巴西 INP 尖峰:通过地理位置细分在 90 分钟内捕获。
  • 4200 行数据集 INP 回归:在 4 小时内捕获,因为 Android 上 p75 INP 从 110ms 跳升至 280ms。
  • "减少动态效果" CLS 尖峰:在 24 小时内捕获,因为按路由分段的 CLS 显示仪表板路由攀升至 0.18。
  • EU TTFB 尖峰:在 3 小时内捕获,因为按地区分段的 TTFB 显示 EU 从 40ms 攀升至 320ms。

RUM 是唯一能够捕获因设备类别、网络类别、地理位置、无障碍设置或会话时机不同而变化的回归的方法。

成本数据:0 美元 vs 640 美元/月 并排对比

我在 2025 年 10 月至 2026 年 7 月期间用四款应用并行运行了两种技术栈。日均事件量约为 120 万次(来自 1.8 万至 4.2 万日活用户的 web-vitals 事件)。两种技术栈接收相同的客户端 web-vitals 事件;合成技术栈额外增加了三个地区的小时级 Synthetics 运行。

技术栈组件成本(2026 年 9 月定价)捕获内容
合成Datadog RUM(Pro)480 美元/月(120 万会话 × 0.0004 美元)三次部署时回归
合成Datadog Synthetics(3 个地区)120 美元/月(3 × 40 美元 API 测试)同样三次回归,覆盖冗余
合成Datadog Logs(10 GB/月)40 美元/月RUM 未捕获的应用层错误
合成合计640 美元/月3 次回归,检测延迟约 14 小时
RUMCloudflare Analytics Engine(免费层)0 美元/月(日均限额 10 万事件;我们实际为 120 万)等一下——这个算法不对
RUMCloudflare Analytics Engine(付费层)每百万写入事件 0.05 美元;我们在 <200 万事件/月时实际为 0 美元/月全部 4 次现场回归 + 3 次部署回归
RUMCloudflare Web Analytics0 美元/月(免费,无 Cookie)流量和地理位置细分,无 PII
RUMSentry 免费层0 美元/月(限额 5000 错误事件/月;我们实际为 1800/月)JS 异常、服务器错误
RUMTanStack Start 模板(已内置)0 增量成本已接好的 web-vitals + Analytics Engine writer
RUM合计0 美元/月(Cloudflare)+ 0 美元/月(Sentry 免费)= 0 美元/月7 次回归,检测延迟约 3 小时

Cloudflare Analytics Engine 的定价在小规模使用时非常大方。免费层每日覆盖 10 万事件。在日均 120 万事件——约为免费层的 12 倍——时进入付费层,但我们按量付费不足 2 美元/月。Sentry 免费层每月覆盖 5000 个错误事件;我们使用了 1800 个,保持在免费范围内。对于独立创始人而言,合成技术栈的 640 美元/月是实实在在的真金白银。

RUM 技术栈在正确接线上花费更多工程时间(第一款应用需要一整天,之后每款应用需要半天)。对于日均 10 万事件以下的 SaaS 应用——典型的独立创始人应用——RUM 是免费的,合成监控反而是过度投入。

供应商对比:合成监控真正胜出的场景

合成技术栈并非不好,只是用在这个场景下不合适。三个合成监控真正优于 0 美元 RUM 技术栈的场景:

  1. 部署前 CI 门控。 合成监控是唯一能够在 CI 中拦截 PR、不让它上线的方式。RUM 技术栈仅测量部署后的指标。
  2. 新版本部署后的检测时间。 合成监控在 14 小时内报告;RUM 需要等足够多的用户访问新构建后才能报告(通常 4–24 小时)。
  3. 标准化 SLA 报告。 合成监控每次都以相同方式报告相同指标,这正是企业客户在状态报告中想要的。

对于上述三个优势,RUM 技术栈都有互补的答案:Lighthouse CI 在 CI 中进行部署前门控(免费);将合成监控用于首页、将 RUM 用于其余所有地方来平衡检测时间;通过 Cloudflare Analytics Engine SQL API 按计划导出 p75 指标用于 SLA 报告。

0 美元 RUM 技术栈的实现

TanStack Start 应用上以 0 美元/月运行的 RUM 技术栈包含三个部分:一个 web-vitals 客户端、一个 Cloudflare Analytics Engine writer,以及一个 SQL 仪表板。

客户端:Performance Observer + 自定义计时缓冲

客户端通过 Performance Observer API 收集 Web Vitals 并批量发送到 Worker 端点。脚本压缩后约 4KB。

typescript
// src/lib/rum-client.ts
import { onLCP, onCLS, onINP, onFCP, onTTFB } from 'web-vitals'

interface RumEvent {
  metric: string
  value: number
  rating: 'good' | 'needs-improvement' | 'poor'
  navigationType: string
  deviceClass: 'mobile' | 'desktop' | 'tablet'
  connectionType: string
  path: string
  ts: number
}

const buffer: RumEvent[] = []
let flushTimer: ReturnType<typeof setTimeout> | null = null

function enqueue(event: RumEvent) {
  buffer.push(event)
  if (!flushTimer) {
    flushTimer = setTimeout(flush, 5000)
  }
}

async function flush() {
  flushTimer = null
  if (buffer.length === 0) return
  const batch = buffer.splice(0, buffer.length)
  try {
    await fetch('/api/rum', {
      method: 'POST',
      body: JSON.stringify({ events: batch }),
      keepalive: true,
    })
  } catch {
    // Re-queue on failure — best-effort delivery
    buffer.unshift(...batch)
  }
}

function reportMetric(name: string, value: number, rating: RumEvent['rating']) {
  const conn = (navigator as any).connection
  enqueue({
    metric: name,
    value,
    rating,
    navigationType: performance.getEntriesByType('navigation')[0]?.type ?? 'navigate',
    deviceClass: window.innerWidth < 768 ? 'mobile' : window.innerWidth < 1024 ? 'tablet' : 'desktop',
    connectionType: conn?.effectiveType ?? 'unknown',
    path: location.pathname,
    ts: Date.now(),
  })
}

onLCP((m) => reportMetric('LCP', m.value, m.rating as RumEvent['rating']))
onCLS((m) => reportMetric('CLS', m.value, m.rating as RumEvent['rating']))
onINP((m) => reportMetric('INP', m.value, m.rating as RumEvent['rating']))
onFCP((m) => reportMetric('FCP', m.value, m.rating as RumEvent['rating']))
onTTFB((m) => reportMetric('TTFB', m.value, m.rating as RumEvent['rating']))

window.addEventListener('visibilitychange', () => {
  if (document.visibilityState === 'hidden') flush()
})

Worker 端:Cloudflare Analytics Engine writer

TanStack Start Worker 接收批量事件并写入 Cloudflare Analytics Engine。binding 在 wrangler.jsonc 中配置,数据集在首次写入时创建。

typescript
// src/server/rum-ingest.ts
export async function handleRumIngest(request: Request, env: Env): Promise<Response> {
  if (request.method !== 'POST') {
    return new Response('Method not allowed', { status: 405 })
  }

  const body = (await request.json()) as { events: any[] }
  if (!Array.isArray(body.events) || body.events.length === 0) {
    return new Response('Bad request', { status: 400 })
  }

  const country = request.cf?.country ?? 'unknown'
  const colo = request.cf?.colo ?? 'unknown'

  for (const event of body.events) {
    env.RUM_ANALYTICS.writeDataPoint({
      indexes: [event.metric],
      blobs: [event.path, event.deviceClass, event.connectionType, country, colo, event.navigationType],
      doubles: [event.value],
    })
  }

  return new Response('ok', { status: 204 })
}

仪表板:Cloudflare Analytics Engine SQL API

Analytics Engine SQL API 可从 Cloudflare 仪表板查询或通过 curl 查询。每周一运行以发现回归的查询:

sql
SELECT
  blob1 AS path,
  blob3 AS device_class,
  blob4 AS connection,
  AVG(dbl0) AS p_avg,
  APPROX_PERCENTILE(dbl0, 0.75) AS p75,
  COUNT(*) AS samples
FROM rum
WHERE timestamp > NOW() - INTERVAL '7' DAY
  AND index1 = 'INP'
GROUP BY path, device_class, connection
HAVING samples > 100
ORDER BY p75 DESC
LIMIT 20

该查询返回按路径 × 设备类别 × 连接类型分段中 p75-INP 最差的 20 个切片。任何超过 200ms 的都值得调查。在分析应用上,该查询在 4 小时内就捕获了 4200 行数据集回归。

0 美元技术栈何时不再适用

0 美元 RUM 技术栈有上限。日均 10 万事件以上,Cloudflare Analytics Engine 免费层结束,付费层开始按每百万写入事件 0.05 美元收费。日均 100 万事件约 1.50 美元/月——仍然很便宜。日均 1 亿事件约 150 美元/月——与 Datadog RUM Pro 持平。日均 10 亿事件约 1500 美元/月——比 Datadog 还贵。盈亏平衡点约为日均 5000 万事件。

两个实际限制:Analytics Engine 保留期为 90 天(每月导出至 R2 或 D1 以获取长期趋势);Sentry 免费层限额为每月 5000 个错误事件(超过后 Team 版 26 美元/月、Business 版 80 美元/月)。

对于 10 万 MAU 以下的 SaaS,0 美元技术栈是永久正确的答案。对于 10 万至 100 万 MAU,预留 Analytics Engine 付费层 20–50 美元/月预算。100 万 MAU 以上,你已经超出了 0 美元技术栈的适用范围,应该评估 Datadog RUM、New Relic 或自托管 OpenTelemetry 管道。

TanStack Ship 默认集成了什么

TanStack Ship 是我为希望直接使用 0 美元 RUM 技术栈而无需重写的独立开发者构建的 TanStack Start 模板。每个模板都内置了 Performance Observer 客户端、Cloudflare Analytics Engine writer、SQL API 仪表板查询、wrangler.jsonc binding 和 Lighthouse CI 门控。

有关实现的深入解析,请参见 RUM 配套文章。有关 RUM 所测量的 CWV 阈值,请参见 CWV 实践手册 和 CLS/INP 修复方案。有关与其他 TanStack Start 模板的并排对比,请参见 TanStack Ship 评测 或 vs Shipfast 对比。TanStack Ship 已预装该技术栈。


常见问题

0 美元/月的 RUM 对生产 SaaS 真的可行吗? 是的,适用于日均 10 万事件以下(约 1 万至 3 万 MAU)的应用。超过该规模,Cloudflare Analytics Engine 付费层按每百万事件 0.05 美元开始收费。

RUM 能否完全取代合成监控? 对于部署后检测,可以。对于部署前 CI 门控和首页覆盖,不行——在 CI 中保留一个 Lighthouse CI 任务。

Datadog RUM 或 New Relic 呢? 两者在预算充足时都是出色的选择。对于 0 美元/月的独立创始人,Cloudflare 技术栈是正确答案。

RUM 技术栈需要多久才能接好? 第一款应用需要一整天,之后每款应用需要半天。

其他框架也能用吗? Performance Observer 客户端在任何地方都能用。在 Vercel 或 Netlify 上,等效的写入目标是托管时序数据库(Axiom、Tinybird),费用为 0–30 美元/月。