DPTCloud
Back to articles
Technology Insight

Xây Dựng Hệ Thống Cảnh Báo VPS Thông Minh Qua Cuộc Gọi Telegram/Discord Bằng Prometheus Alertmanager Và Webhook

May 29, 2026

Đặt Vấn Đề: Tại Sao Hệ Thống Cảnh Báo Qua Email Đã Lỗi Thời?

Trong kỷ nguyên quản trị hạ tầng đám mây và máy chủ ảo (VPS), việc đảm bảo tính sẵn sàng hoạt động liên tục (Uptime) của hệ thống là điều tối quan trọng. Tuy nhiên, nhiều doanh nghiệp và kỹ sư hệ thống vẫn đang phụ thuộc vào các kênh cảnh báo truyền thống như Email hoặc SMS thủ công. Thực tế chứng minh, các thông báo qua Email thường bị bỏ lỡ do rơi vào hộp thư rác hoặc không đủ độ phân tán âm thanh để gây sự chú ý trong các tình huống khẩn cấp giữa đêm.

Để tối ưu hóa thời gian phản hồi sự cố (Mean Time to Resolution - MTTR), việc xây dựng một cơ chế cảnh báo thời gian thực (Real-time alerting) có khả năng chủ động tương tác trực tiếp là giải pháp bắt buộc. Bài viết này hướng dẫn chi tiết cách thiết lập hệ thống giám sát và cảnh báo thông minh cho VPS bằng cách kết hợp Prometheus, Alertmanager và một Webhook Middleware tùy chỉnh để gửi tin nhắn hoặc kích hoạt cuộc gọi thoại trực tiếp qua Telegram và Discord.

Tổng Quan Kiến Trúc Hệ Thống Cảnh Báo Thông Minh

Trước khi đi vào chi tiết cấu hình triển khai, chúng ta cần hiểu rõ luồng luân chuyển dữ liệu và kiến trúc của hệ thống giám sát tự động này:

  • Prometheus: Hệ thống lưu trữ dữ liệu dạng chuỗi thời gian (Time-series database). Prometheus liên tục thu thập (scrape) số liệu cấu hình hiệu năng (Metrics) từ VPS thông qua Node Exporter. Khi một chỉ số vượt ngưỡng an toàn (ví dụ: CPU > 90%, tràn RAM hoặc cạn dung lượng ổ đĩa), Prometheus sẽ kích hoạt trạng thái báo động (Firing).
  • Alertmanager: Thành phần chịu trách nhiệm tiếp nhận các cảnh báo thô từ Prometheus. Tại đây, Alertmanager thực hiện các tác vụ lọc nhiễu, gom nhóm (grouping), khử trùng lặp (deduplicating) và định tuyến (routing) các cảnh báo đến các đầu mối nhận tin.
  • Custom Webhook Server (Middleware): Do Telegram và Discord không hỗ trợ xử lý trực tiếp định dạng payload JSON gốc từ Alertmanager theo cơ chế thực hiện cuộc gọi, chúng ta sẽ cần một dịch vụ trung gian nhẹ (Node.js, Python Flask hoặc Go) để chuyển đổi cấu trúc dữ liệu và gọi API hệ thống bên thứ ba.
  • Telegram Bot & Discord Webhook: Đầu cuối hiển thị thông tin dạng tin nhắn trực quan giàu định dạng và thực thi lệnh cuộc gọi thoại (Voice Call Automation) tới quản trị viên.

Hướng Dẫn Triển Khai Từng Bước

Bước 1: Cấu Hình Luật Cảnh Báo (Alerting Rules) Trên Prometheus

Để Prometheus biết khi nào VPS gặp sự cố, chúng ta cần định nghĩa các quy tắc giám sát trong tệp cấu hình quy tắc. Hãy tạo tệp /etc/prometheus/alert.rules.yml:

groups:
  - name: vps_hardware_alerts
    rules:
      - alert: HighCPULoad
        expr: 100 - (avg by(instance) (rate(node_cpu_seconds_total{mode="idle"}[5m])) * 100) > 85
        for: 2m
        labels:
          severity: critical
        annotations:
          summary: "VPS CPU Load quá cao trên {{ $labels.instance }}"
          description: "Mức sử dụng CPU hiện tại đã vượt quá 85% liên tục trong 2 phút."

      - alert: InstanceDown
        expr: up == 0
        for: 1m
        labels:
          severity: page
        annotations:
          summary: "Máy chủ VPS {{ $labels.instance }} không phản hồi"
          description: "Không thể kết nối tới Node Exporter trên máy chủ này hơn 1 phút."

Sau đó, liên kết tệp quy tắc này vào tệp cấu hình chính prometheus.yml và tiến hành khởi động lại dịch vụ Prometheus.

Bước 2: Cấu Hình Định Tuyến Khẩn Cấp Trên Alertmanager

Tiếp theo, cấu hình Alertmanager để chuyển tiếp các cảnh báo có nhãn severity: critical hoặc severity: page trực tiếp tới Webhook Middleware của bạn thay vì các kênh thông thường.

Chỉnh sửa tệp cấu hình alertmanager.yml như sau:

global:
  resolve_timeout: 5m

route:
  group_by: ['alertname', 'instance']
  group_wait: 10s
  group_interval: 30s
  repeat_interval: 1h
  receiver: 'smart-webhook'

receivers:
  - name: 'smart-webhook'
    webhook_configs:
      - url: 'http://localhost:5000/alerts'
        send_resolved: true

Lưu ý quan trọng: Tham số send_resolved: true đảm bảo rằng khi hệ thống VPS tự phục hồi hoặc hạ tải, Alertmanager sẽ gửi thêm một sự kiện thông báo trạng thái Đã Khắc Phục đến thiết bị của bạn.

Bước 3: Xây Dựng Webhook Chuyển Đổi Dữ Liệu Và Kích Hoạt Cuộc Gọi

Dưới đây là mã nguồn gợi ý viết bằng Python sử dụng thư viện Flask để hứng dữ liệu từ Alertmanager. Đoạn mã này có chức năng định dạng lại tin nhắn và sử dụng các giao thức tích hợp (như Telegram Call Bot hoặc tích hợp Gateway gọi điện Voice API như Twilio/Stringee) kết hợp với các Webhook của Discord và Telegram.

from flask import Flask, request, jsonify
import requests

app = Flask(__name__)

TELEGRAM_TOKEN = "YOUR_TELEGRAM_BOT_TOKEN"
TELEGRAM_CHAT_ID = "YOUR_CHAT_OR_GROUP_ID"
DISCORD_WEBHOOK_URL = "YOUR_DISCORD_WEBHOOK_URL"

def send_to_telegram(text):
    url = f"[https://api.telegram.org/bot](https://api.telegram.org/bot){TELEGRAM_TOKEN}/sendMessage"
    payload = {"chat_id": TELEGRAM_CHAT_ID, "text": text, "parse_mode": "Markdown"}
    requests.post(url, json=payload)

def trigger_voice_call(message):
    # Giả lập tích hợp với Voice Gateway (Ví dụ: Twilio, VoIP) để gọi trực tiếp số điện thoại
    # Hoặc thông qua hệ thống cuộc gọi tự động của Telegram Bot hỗ trợ VoIP
    print(f"[CALL LOG] Đang kích hoạt cuộc gọi khẩn cấp: {message}")

def send_to_discord(text):
    payload = {"content": text}
    requests.post(DISCORD_WEBHOOK_URL, json=payload)

@app.route('/alerts', methods=['POST'])
def handle_alerts():
    data = request.get_json()
    if not data or 'alerts' not in data:
        return jsonify({"status": "error", "message": "Payload trống"}), 400

    for alert in data['alerts']:
        status = alert.get('status', 'firing').upper()
        alert_name = alert['labels'].get('alertname', 'Cảnh báo không rõ')
        instance = alert['labels'].get('instance', 'N/A')
        severity = alert['labels'].get('severity', 'warning')
        summary = alert['annotations'].get('summary', '')

        msg = f"*[{status}] {alert_name}*\n*Máy chủ:* {instance}\n*Chi tiết:* {summary}"
        
        # Gửi tin nhắn text truyền thống
        send_to_telegram(msg)
        send_to_discord(msg)

        # Nếu mức độ nghiêm trọng là Critical, kích hoạt cuộc gọi khẩn cấp
        if severity == 'critical' and status == 'FIRING':
            trigger_voice_call(f"Cảnh báo nghiêm trọng trên máy chủ {instance}. {summary}")

    return jsonify({"status": "success"}), 200

if __name__ == '__main__':
    app.run(host='0.0.0.0', port=5000)

Tối Ưu Hóa Trải Nghiệm Cảnh Báo Cho Đội Ngũ Vận Hành (DevOps)

Để tránh hiện tượng "Alert Fatigue" (Kiệt quệ vì cảnh báo nhiễu), hệ thống thông minh cần được tinh chỉnh nghiêm ngặt:

  1. Phân tầng ưu tiên rõ ràng: Chỉ áp dụng cơ chế cuộc gọi thoại (Voice Call) đối với các sự cố gây sập hệ thống (Downtime toàn bộ). Các sự cố nhỏ như cảnh báo dung lượng đĩa đạt 80% chỉ nên gửi tin nhắn text thông thường trên Discord.
  2. Thiết lập chính sách Ổn định (Inhibition Rules): Cấu hình Alertmanager để tắt các cảnh báo hiệu năng thấp hơn nếu máy chủ chính được xác định là đã hoàn toàn mất kết nối (NodeDown).
  3. Định dạng nội dung trực quan: Sử dụng Markdown phong phú, mã màu đại diện cho các mức độ nghiêm trọng (Màu đỏ cho Critical, Màu cam cho Warning) giúp kỹ sư trực ban nắm bắt vấn đề chỉ trong 1 giây nhìn vào màn hình điện thoại.

Lời Kết

Tích hợp thành công giải pháp giám sát kết hợp Prometheus, Alertmanager và Webhook giúp doanh nghiệp làm chủ hoàn toàn hạ tầng VPS. Việc nâng cấp từ tin nhắn thông thường lên cơ chế tương tác thông minh qua cuộc gọi Telegram/Discord đảm bảo rằng mọi sự cố nghiêm trọng đều được tiếp cận và xử lý ngay lập tức, giảm thiểu rủi ro gián đoạn dịch vụ kinh doanh đến mức tối đa.

Xây Dựng Hệ Thống Cảnh Báo VPS Thông Minh Qua Cuộc Gọi Telegram/Discord Bằng Prometheus Alertmanager Và Webhook | DPTCloud