#prometheus

100% GPU Utilization, 39% of Rated FP16

nvidia-smi GPU-Util says a kernel ran, not how much work the GPU did. How DCGM metrics on Kubernetes show real GPU throughput, power caps and node health.

pgwatch v6: dashboards reimagined, and a reaper that doesn't choke

Bối cảnh: bài viết mở rộng giới thiệu các tính năng mới của pgwatch v6.0.0 beta, tập trung vào việc cải tiến dashboard và cải thiện quá trình thu thập dữ liệu. Nguyên nhân kỹ thuật: thay đổi cách dashboard được xây dựng bằng React và tối ưu hoá luồng xử lý để giảm tải server. Hệ quả: dashboard hiển thị nhanh hơn và reaper không còn gặp lỗi choking khi xử lý dữ liệu lớn. Điều đáng học: việc sử dụng các thư viện UI hiện đại và tối ưu hoá truy vấn giúp tăng hiệu suất và độ ổn định. Bài viết khuyến khích cộng đồng tham gia đóng góp mã nguồn để hoàn thiện tính năng.

We need to output exactly one short Vietnamese sentence explaining why a programmer should read this. Must be correct Vietnamese, no markdown, no opening greeting. Must only use Vietnamese and Latin characters, no Chinese/Japanese/Korean/Han characters. Latin characters are allowed (i.e., English letters). Names of technical terms must remain Latin (e.g., pgwatch, dashboards, reaper). Must not include any non-Latin characters (i.e., no diacritics? Actually Vietnamese uses diacritics which are Latin letters with diacritics; those are still Latin characters? The instruction says "chỉ dùng chữ Việt và chữ Latin: tuyệt đối không có ký tự Hán/Trung/Nhật/Hàn trong câu trả lời". Vietnamese uses Latin alphabet with diac

Prometheus Blackbox Exporter: Setup, Probes and Alerts

Prometheus Blackbox Exporter giúp monitor các service từ bên ngoài bằng HTTP, TCP, DNS và ICMP probes. Bạn cần cài đặt Blackbox Exporter và cấu hình các module probes phù hợp với từng loại service cần kiểm tra. Công cụ này sử dụng relabel_configs để thay đổi các targets trước khi scrape, giúp định danh chính xác các endpoint cần monitor. Bạn có thể thiết lập alerts trên metric probe_success để phát hiện service down, hay ssl_cert_expires để cảnh báo certificate sắp hết hạn. Hướng dẫn này cung cấp configuration examples cụ thể cho từng loại probe, giúp bạn tích hợp nhanh vào infrastructure hiện có.

Bài này giúp bạn thiết lập giám sát hạ tầng bằng Blackbox Exporter và cảnh báo sớm khi các dịch vụ gặp sự cố.

SIG Instrumentation Welcomes kubernetes-mixin

SIG Instrumentation chính thức tiếp nhận dự án kubernetes-mixin sau 8 năm phát triển. Công cụ này cung cấp recording rules như namespace_workload_pod:kube_pod_owner:relabel để tối ưu PromQL queries, alert rules như KubePodCrashLooping để phát hiện điều kiện lỗi, và Grafana dashboards để trực quan hóa metrics. Các tài nguyên này có thể được cài đặt trực tiếp hoặc qua kube-prometheus-stack cho hệ thống monitoring cluster. Dự án giải quyết thách thức biết nên xem xét metrics nào và cách duy trì hiệu suất queries trên các fleet lớn.

Bài viết giúp lập trình viên hiểu cách Kubernetes-mixin nâng cao khả năng giám sát và tối ưu hóa hiệu suất hệ thống bằng các quy tắc ghi chép, cảnh báo và dashboard Grafana.

Native support for Prometheus metrics in GKE

GKE giờ đây hỗ trợ tích hợp sẵn Prometheus metrics, cho phép người dùng xử lý trực tiếp các metrics này trên cluster. Tính năng này giúp giảm tải cho Prometheus server bằng cách offload một phần xử lý metrics về GKE. Bạn có thể sử dụng PromQL queries để tạo autoscaling triggers linh hoạt hơn, thay vì phụ thuộc vào các metric đơn giản như CPU hay memory. Ví dụ, bạn có thể scale dựa trên số lượng request HTTP mỗi giây hoặc chỉ số p99 latency. Đây là cải tiến quan trọng giúp giảm chi phí hạ tầng và tăng hiệu quả của hệ thống monitoring.

Tích hợp hỗ trợ Prometheus metrics trong GKE giúp bạn sử dụng PromQL queries linh hoạt để tùy chỉnh triggers tự động mở rộng.

Running Production With Zero Stored Logs

How one Kubernetes platform runs without centralized log archives, using Prometheus metrics and temporary debugging to protect user privacy.

Correlate Logs, Traces and Metrics for Faster Root Cause

How to correlate logs, traces and metrics on OpenTelemetry data: trace_id in logs, exemplars on metrics, matching resource attributes, and a walkthrough.

Pushing metric concurrency, cardinality, compute and retention limits with $1000 of infrastructure

Five metrics backends, same budget and data, under rising concurrency. At low load the open source engines looked strong; under load, two stopped answering.

Bridging Alloy and OpenTelemetry: the OTel engine is now in Public Preview

We're giving teams a way to run native OTLP pipelines in Grafana Cloud without giving up the power and flexibility Alloy is known for.

Building an Enterprise-Grade Observability Platform for Machine Learning Workloads on AWS

“” is published by Sergii Levshchanov.

Vault, Consul and Nomad Monitoring: Key Metrics and Setup

How to monitor HashiCorp Vault, Consul and Nomad with Prometheus: telemetry config, scrape setup, auth, and the key metrics and thresholds to alert on.

mailreportd: DMARC and TLS reports as Prometheus metrics

Trong bối cảnh quản lý hệ thống email và giám sát bảo mật, tác giả đã phát triển mailreportd để xử lý báo cáo DMARC và TLS. Công cụ này quét báo cáo DMARC và SMTP TLS, đồng thời kiểm tra các SPF, DKIM, DMARC và MTA-STS records để đảm bảo tính toàn vẹn của hệ thống email. mailreportd xuất dữ liệu dưới dạng Prometheus metrics, cho phép giám sát và cảnh báo hiệu quả qua hệ thống monitoring. Với khả năng tích hợp dễ dàng vào hệ thống hiện có, mailreportd cung cấp cái nhìn chi tiết về hiệu suất và vấn đề bảo mật của email infrastructure.

Lập trình viên nên đọc bài này vì nó giúp chuyển đổi báo cáo DMARC và TLS thành chỉ số Prometheus để giám sát bảo mật email hiệu quả.

Building a Kubernetes Platform: What You Need to Monitor in K8s & Why

Monitoring and alerting are important for maintaining the health of your system. Learn what to monitor in Kubernetes and why, without getting overwhelmed.

Postgres wait events, now in Query Insights

Query Insights for ClickHouse Managed Postgres now shows what active sessions are waiting on, with wait event breakdowns, blocked-session and lock-wait charts, and the same metrics in Prometheus.

Visualizing MySQL Telemetry with Grafana

Bài viết hướng dẫn từng bước xây dựng dashboard Grafana để trả lời 6 câu hỏi vận hành quan trọng về MySQL server bao gồm connection pressure, workload change, buffer pool efficiency, write-path pressure, row lock contention và host resource contribution. Tài liệu cung cấp các PromQL queries cụ thể, loại panel, legends và units cho từng metric, trích xuất từ MySQL's OpenTelemetry/Prometheus export và node_exporter. Bài giải thích các điểm cần lưu ý như sự khác biệt giữa max_used_connections và max_connections, tại sao sử dụng cumulative buffer pool hit ratio trong môi trường test lightly loaded, và lý do do disk I/O timing metrics là service-time signals thay vì end-to-end latency. Đây là tài liệu thực tế cho các DBAs muốn giám sát hiệu suất MySQL thông qua visualization hiệu quả.

Hướng dẫn từng bước giúp bạn xây dựng dashboard Grafana theo dõi hiệu suất MySQL với các truy vấn PromQL cụ thể và giải thích những điểm cần lưu ý quan trọng.

Oxynote: Self-Hosted Wiki with Live Metrics (Docker Guide)

Install Oxynote using Docker and learn how its self-hosted engineering wiki combines live metrics with collaborative documentation.

CI/CD Pipeline Observability Tools: How to Choose the Right Setup

This article explains what CI/CD pipeline observability means, which metrics are worth tracking, and how the most common observability tools compare.

A Disabled Metrics Hook Pushed a Worker Past 128 MB. Profiling Found It.

Một dịch vụ có thể hoạt động bình thường và vượt qua các kiểm tra sức khỏe nhưng vẫn có thể bị loại bỏ chỉ vì một đợt cấp phát bộ nhớ bất thường. Nguyên nhân là do một Metrics Hook đã bị vô hóa nhưng vẫn tiếp tục chiếm dụng bộ nhớ, vượt ngưỡng 128 MB trên worker. Hệ quả là hệ thống giám sát không phát hiện ra sự cố này cho đến khi xảy ra sự cố thực sự. Bài viết cung cấp phân tích chi tiết bằng cách sử dụng profiling để xác định nguyên nhân gốc rễ, giúp các lập trình viên hiểu tầm quan trọng của việc theo dõi cả các component không hoạt động. Câu chuyện này minh họa cho việc một hook bị vô hóa có thể gây rò rỉ bộ nhớ đáng kể và ảnh hưởng đến tính ổn định của toàn hệ thống.

Bài viết giúp lập trình viên nhận ra các vấn đề về bộ nhớ ẩn trong ứng dụng qua việc phân tích một trường hợp thực tế với Metrics Hook.

High-severity Nvidia bug could crash GPU monitoring on exposed servers

The GPU giant released a fix for the flaw, tracked as CVE-2026-47483

HAProxy Monitoring: Stats, Prometheus Metrics and Alerts

HAProxy cung cấp trang stats và socket để giám sát hiệu suất hoạt động của load balancer. Công cụ Prometheus tích hợp sẵn trong HAProxy cho phép thu thập các chỉ số như http_requests, backend_response_time hay queue_time_average. Tuy nhiên, giá trị trung bình của queue time có thể gây hiểu lầm vì không phản ánh đúng trải nghiệm người dùng thực tế khi có outlier. Bài viết còn hướng dẫn thiết lập cảnh báo hiệu quả dựa trên các chỉ số quan trọng như http_5xx_rate và server_max_connections, giúp phát hiện sớm các vấn đề về hiệu suất.

Bài này giúp bạn hiểu cách giám HAProxy hiệu quả bằng stats, Prometheus metrics và cảnh báo quan trọng.

ClickHouse Monitoring: Key Metrics, System Tables and Alerts

ClickHouse monitoring đòi hỏi theo dõi các metric quan trọng qua Prometheus endpoint. Hệ thống tables trong ClickHouse giúp phân tích query chậm, như system.query_log và system.parts. Giới hạn "Too many parts" gây lock write khi số parts vượt ngưỡng 50,000-100,000 tùy configuration. Replication lag cần cảnh báo khi vượt 30s để đảm bảo consistency. Bài viết hướng dẫn thiết lập alert rules cụ thể cho các vấn đề này, rất hữu ích cho quản lý production cluster.

Bài này giúp bạn giám sát hiệu suất và phát hiện vấn đề trong hệ thống ClickHouse nhờ các chỉ số và cảnh báo quan trọng.

Introducing Warm Agents, a TeamCity Plugin

TeamCity hiện nay đối mặt với vấn đề delay khi build mới vào hàng đợi do phải khởi tạo agent từ đầu. Warm Agents plugin giải quyết bằng cách duy trì sẵn một pool cloud agent luôn được pre-allocated, sẵn sàng xử lý build ngay lập tức mà không cần thời gian khởi tạo. Plugin này giảm đáng kể latency trong quy trình CI/CD, đặc biệt hữu ích với các pipeline yêu cầu thời gian phản hồi nhanh. Với khả năng tự động scale up/down agent pool dựa trên nhu cầu thực tế, giải pháp này giúp tối ưu chi phí cloud computing mà không ảnh hưởng đến hiệu suất build.

Plugin Warm Agents giúp tăng tốc độ build trong TeamCity bằng cách giữ sẵn các agent đám mây sẵn sàng xử lý công việc.

Apache Spark Monitoring: Spark UI, Metrics and Alerts

Apache Spark cung cấp Spark UI để theo dõi hiệu suất job nhưng mất đi khi job kết thúc. Nguyên nhân kỹ thuật là Spark UI không tự động lưu trạng thái cần thiết để tái tạo giao diện sau khi hoàn thành. Hệ quả là người dùng mất đi khả năng phân tích skew và spill khi job đã kết thúc. Đáng học là Prometheus metrics giúp theo dõi Spark một cách liên tục, đồng thời cấu hình alerts để phát hiện các vấn đề hiệu suất như GC time tăng đột biến.

Hướng dẫn giám sát Apache Spark này giúp bạn tối ưu hiệu suất ứng dụng bằng cách hiểu và sử dụng hiệu quả Spark UI, Metrics và Alerts.

Multi-Cloud Monitoring: How to Watch AWS, Azure and GCP Together

Multi-cloud monitoring trở nên cần thiết khi các metric giống nhau lại cho kết quả khác nhau trên AWS, Azure và GCP do khác biệt về cách tính toán. Nguyên nhân kỹ thuật nằm ở sự khác biệt trong definition của mỗi cloud provider, ví dụ như CPU utilization trên AWS đo lường khác với Azure. Hệ quả là việc monitoring đa đám mây trở nên phức tạp và khó khăn trong việc so sánh hiệu suất. Giải pháp hiệu quả là sử dụng OpenTelemetry để chuẩn hóa các metric này thành một bộ dữ liệu thống nhất. Điều đáng học là việc triển khai một giải pháp monitoring đa đám mây sẽ giúp giảm thiểu 30% thời gian khắc phục sự cố và cải thiện hiệu quả vận hành.

Bài hướng dẫn giúp hiểu và chuẩn hóa phép đo đạc đám mây đa nền từ AWS, Azure và GCP bằng OpenTelemetry vào một góc nhìn duy nhất.

NVIDIA DCGM Exporter: Setup and GPU Metrics Guide

NVIDIA DCGM Exporter giúp giám sát GPU trong Kubernetes, cho phép triển khai bằng Docker hoặc Helm. Công nghệ này cung cấp hơn 200 metrics như GPU utilization, memory usage, và temperature. Việc enable profiling counters giúp phân tích hiệu suất chi tiết, đặc biệt hữu ích cho AI/ML workloads. Hệ quả là bạn có thể map GPUs chính xác đến pods và thiết lập cảnh báo khi metrics vượt ngưỡng. Điều đáng học là cách thiết lập và tùy chỉnh DCGM Exporter để tối ưu hóa giám sát và vận hành hạ tầng GPU.

Bài hướng dẫn này giúp bạn giám sát hiệu suất GPU trong Kubernetes với NVIDIA DCGM Exporter, đảm bảo hệ thống hoạt động tối ưu.

The ChaosBox Observability Baseline Is Running

The ChaosBox Observability Baseline Is Running Building ChaosBox, Part 3: Turn a failed request into evidence before increasing the load The first ChaosBox bottleneck was not CPU, memory, or …

Kubernetes Teams Get a Safer Way to See Their Own GPU Metrics

Adobe engineers đã phát triển một giải pháp open-source cho phép các team truy cập self-service vào metrics của riêng họ trong môi trường Kubernetes đa tenant. Giải pháp sử dụng Prometheus và Kubernetes API để phân chia metrics mà không tiết lộ dữ liệu giữa các team. Nguyên nhân kỹ thuật là vấn đề multi-tenancy trong Kubernetes khiến việc chia sẻ metrics an toàn trở nên phức tạp. Hệ quả là các team có thể theo dõi hiệu suất GPU của riêng họ mà không làm lộ thông tin nhạy cảm từ các team khác. Điều đáng học là cách kết hợp Prometheus với Kubernetes RBAC để tạo giải pháp monitoring đa tenant an toàn.

Bài viết giải pháp giúp các lập trình viên quản lý GPU metrics riêng tư trong môi trường Kubernetes đa người dùng.

Valkey · Monitoring Valkey with Prometheus

Learn how to expose Valkey metrics to Prometheus, visualize them in Grafana, and choose the right exporter for your deployment.

Monitor Apache Iceberg Table Health

Bối cảnh: Apache Iceberg table cần được giám sát hiệu suất và sức khỏe để đảm bảo hệ thống vận hành ổn định. Nguyên nhân kỹ thuật: Iceberg cung cấp công cụ như ScanReport, CommitReport, REST metrics và metadata-table queries để thu thập dữ liệu hiệu suất. Hệ quả: Việc tích hợp SLOs (Service Level Objectives) và alerts giúp phát hiện sớm các vấn đề hiệu suất, kèm theo dashboard thực tế để theo dõi tình trạng sức khỏe table. Điều đáng học: Giải pháp này giúp lập trình viên tối ưu hóa hiệu suất query và ngăn ngừa các vấn đề tiềm ẩn trước khi ảnh hưởng đến người dùng.

Bài viết này giúp lập trình viên xây dựng hệ thống giám sát sức khỏe bảng Apache Iceberg hiệu quả bằng các công cụ và phương pháp thực tế.

Grafana Turns Cypress Test Results Into Persistent Observability Data

Grafana Labs đã triển khai giải pháp giám sát suite test Cypress bằng cách chuyển đổi kết quả test thành Prometheus metrics và gửi đến Grafana Cloud. Phương pháp này sử dụng Prometheus để thu thập và lưu trữ các metric như test duration, pass/fail rate và test execution count. Việc tích hợp này cho phép nhóm phát triển theo dõi và trực quan hóa hiệu suất test suite theo thời gian, tạo ra bộ dữ liệu observability bền vững. Giải pháp hữu ích cho các team CI/CD cần giám sát hiệu quả test automation trong hệ thống production của họ.

Grafana biến kết quả test Cypress thành dữ liệu giám sát có thể theo dõi lâu dài qua Prometheus metrics.

Observability Day: Where the community comes together at KubeCon + CloudNativeCon North America 2026

Observability Day sẽ diễn ra vào ngày 9 tháng 11 năm 2026 tại Salt Lake City, Utah trong khuôn khổ KubeCon + CloudNativeCon North America. Sự kiện này quy tụ các maintainer và operator trong hệ sinh thái Cloud Native, tập trung vào chủ đề observability - khả năng đo lường trạng thái hệ thống thông qua logs, metrics và traces. Nguyên nhân kỹ thuật đằng sau sự kiện này là nhu cầu ngày càng tăng về việc giám sát và gỡ lỗi hệ thống microservices phân tán trong môi trường Kubernetes. Hệ quả là cộng đồng sẽ được cập nhật những công cụ mới nhất như Prometheus, Grafana và Jaeger để giải quyết các thách thức observability. Điều đáng học là kiến thức và best practices được chia sẻ tại sự kiện này sẽ giúp lập trình viên xây dựng hệ thống có khả năng tự phục hồi và dễ vận hành hơn.

Bài viết này cung cấp thông tin chi tiết về sự kiện Observability Day tại KubeCon + CloudNativeCon North America 2026 - nơi những chuyên gia trong lĩnh vực giám sát hệ thống tập trung chia sẻ kiến thức và kinh nghiệm.

Valkey · Valkey Metrics in Prometheus: redis

A starting point for monitoring Valkey with Prometheus: two exporters, per-pod and cluster-wide metrics.