Cấu hình Valkey Cluster trên Multi VPS ARM để tối ưu chi phí và hiệu năng 1 triệu request/giây
Chúng ta sẽ xây dựng một cụm Valkey cluster trên nhiều máy chủ VPS ARM để đạt hiệu năng xử lý lên đến 1 triệu request mỗi giây với chi phí tối ưu. Hướng dẫn này bao gồm thiết lập...
Nguồn ảnh: Schäferle · Pixabay Content License
Chúng ta sẽ xây dựng một cụm Valkey cluster trên nhiều máy chủ VPS ARM để đạt hiệu năng xử lý lên đến 1 triệu request mỗi giây với chi phí tối ưu. Hướng dẫn này bao gồm thiết lập phần cứng, cấu hình hệ điều hành, cài đặt Valkey, cấu hình cluster, cân bằng tải và tối ưu hóa hiệu năng cho môi trường ARM. Hướng dẫn được áp dụng cho các doanh nghiệp nhỏ và vừa (SME) muốn triển khai hệ thống cache hiệu quả, tiết kiệm chi phí bằng công nghệ mở nguồn.
Giới thiệu và mục tiêu
Valkey là một nhánh phát triển của Redis, được tối ưu hóa cho hiệu năng cao và khả năng mở rộng. Với nhu cầu xử lý lượng lớn truy vấn trong thời gian thực, việc triển khai Valkey cluster trên nhiều máy chủ VPS ARM là giải pháp hiệu quả để đạt được hiệu năng 1 triệu request mỗi giây. ARM là kiến trúc chip tiết kiệm điện, phù hợp với các VPS cloud giá rẻ như NVMe Cloud VPS cho Docker, Nginx & Database, giúp giảm chi phí vận hành đáng kể. Mục tiêu của hướng dẫn này là thiết lập một cluster Valkey ổn định, tự động hóa cấu hình và tối ưu hiệu năng trên nền tảng ARM.
Yêu cầu và thiết lập ban đầu
Để triển khai thành công, cần các điều kiện sau:
- Ít nhất 3 máy chủ VPS ARM (dùng nền tảng như /vi/vps hoặc /en/vps)
- Hệ điều hành: NixOS hoặc Ubuntu 22.04 LTS
- Phần mềm: Valkey (phiên bản 7.0 trở lên), systemd, net-tools, htop, vim
- Thiết lập mạng: Các VPS phải có thể giao tiếp qua mạng nội bộ, mở cổng 6379 (Valkey)
Thiết lập hệ điều hành: Trên mỗi VPS, cập nhật hệ thống và cài đặt các công cụ cần thiết:
sudo apt update && sudo apt upgrade -y
sudo apt install -y build-essential tcl8.6 wget
Tham khảo thêm về cấu hình NixOS flakes để nhân bản 100 máy chủ VPS giống hệt nhau trong 60 giây tại /vi/blog/cach-cau-hinh-nixos-flakes-de-nhan-ban-100-may-chu-vps-giong-het-nhau-trong-60-giay.
Thiết lập Valkey và cấu hình cluster
1. Cài đặt Valkey từ nguồn:
wget https://download.redis.io/releases/valkey-7.0.11.tar.gz
tar xzf valkey-7.0.11.tar.gz
cd valkey-7.0.11
make
sudo make install
2. Tạo file cấu hình Valkey (`valkey.conf`) trên mỗi node:
port 6379
daemonize yes
pidfile /var/run/valkey.pid
logfile /var/log/valkey.log
dir /var/lib/valkey
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-slave-validity-factor 10
appendonly yes
appendfilename "appendonly.aof"
3. Khởi động Valkey và kiểm tra trạng thái:
valkey-server /etc/valkey/valkey.conf
valkey-cli ping
4. Tạo cluster bằng lệnh:
valkey-cli --cluster create <IP1:6379> <IP2:6379> <IP3:6379> --cluster-replicas 1
Tham khảo thêm về quản lý và cấu hình hàng loạt VPS tự động bằng Ansible tại /vi/blog/fleet-management-quan-tri-va-cau-hinh-hang-loat-vps-tu-dong-bang-ansible.
Tối ưu hiệu năng và kiểm tra hiệu suất
Để đạt hiệu năng 1 triệu request/giây, cần tối ưu hóa:
- Thiết lập hệ thống: Tăng giới hạn file descriptor, cấu hình kernel cho hiệu năng cao.
- Valkey: Tối ưu hóa bộ nhớ, bật AOF và RDB, cấu hình maxmemory.
- Mạng: Sử dụng kết nối nội bộ, bật TCP keepalive.
Thực hiện kiểm tra hiệu suất bằng công cụ `valkey-benchmark`:
valkey-benchmark -h <cluster-ip> -p 6379 -c 100 -n 1000000
Chạy thử nghiệm nhiều lần và ghi nhận số request/giây trung bình. Nếu đạt dưới 1 triệu, cần điều chỉnh cấu hình bộ nhớ, số thread hoặc cân bằng tải.
Xác minh và khắc phục sự cố
Để xác minh cluster hoạt động đúng:
- Chạy `valkey-cli cluster nodes` để kiểm tra trạng thái node.
- Giám sát log Valkey: `tail -f /var/log/valkey.log`.
- Kiểm tra kết nối mạng: `ping <IP>`, `telnet <IP> 6379`.
Khắc phục sự cố:
- Không thể kết nối: Kiểm tra tường lửa, mở cổng 6379.
- Cluster không hoạt động: Kiểm tra cấu hình cluster-enabled và cluster-config-file.
- Hiệu năng thấp: Kiểm tra tài nguyên CPU, RAM, I/O và tối ưu hóa bộ nhớ.
Tham khảo thêm về chuyển đổi số toàn diện cho SME chỉ với 10 tháng: Tối ưu hóa ERPNext trên cụm Docker VPS tại /vi/blog/chuyen-doi-so-toan-dien-cho-sme-chi-voi-10thang-toi-uu-hoa-erpnext-tren-cum-docker-vps.
Tham khảo hạ tầng & bài viết liên quan: Cloud VPS NVMe cho Docker, Nginx & Database
Cấu hình Cloud VPS RAM cao tối ưu cho AI, Database & Cache
SSD NVMe Enterprise RAID 10, đường truyền CMC & FPT Quận 9 chống DDoS Anycast, Uptime SLA 99.99%.
VPS-4E
Đã gồm VAT 10%
- CPU: 4 vCPU
- RAM: 8 GB
- SSD: 50 GB NVMe
VPS-5E
Đã gồm VAT 10%
- CPU: 8 vCPU
- RAM: 16 GB
- SSD: 100 GB NVMe
