Skip to content
Tech

Why do I only find out I tagged a metric wrong when the invoice arrives?

82

Cơ hội

Tagging a metric with a high-cardinality attribute like a user ID, session ID, or request path multiplies a single time-series into hundreds of millions, and the bill follows a week later rather than a CI failure follows a minute later. By 2026, observability spend has reached 15 to 25 percent of total cloud spend at affected SaaS companies, with documented single-service incidents generating $90,000 in charges over a weekend. Every major backend, including Datadog, Grafana Cloud, and Prometheus, detects cardinality explosions only after ingestion, meaning the only signal is a budget alert or an invoice line item, not a pull request annotation. The OpenTelemetry SDK added optional cardinality caps in early 2026, but these are runtime circuit-breakers that silently drop data rather than upstream gates that catch the problem before it ships. There is no widely adopted CI primitive that ana

Tại sao quan trọng

Every engineer who has tagged a metric with a user ID has had a bad Tuesday; catching it at the pull request instead of on the invoice permanently changes the economics of instrumentation.

Cách tôi đánh giá cơ hội

Điểm Cơ Hội là đánh giá riêng của tôi, không phải một phép đo chính xác: mức độ gây khó chịu, tần suất xuất hiện và sự khan hiếm của giải pháp hiện có. Điểm càng cao, tôi càng cho rằng vấn đề đó càng đáng để xây dựng.

Mức độ nghiêm trọng8/10

Mức độ phiền toái nó gây ra khi xuất hiện.

Tần suất8/10

Tần suất mọi người thực sự gặp phải nó.

Khoảng trắng8/10

Có rất ít công cụ tốt để xử lý nó hiện nay.

Thêm các vấn đề đáng giải quyết