Quay lại danh sách
AI & Cloud

Triển khai Distributed File System GlusterFS và Ceph

Hướng dẫn chi tiết triển khai hệ thống lưu trữ phân tán GlusterFS và Ceph cho doanh nghiệp, bao gồm cài đặt, cấu hình, kiểm tra và tối ưu hiệu năng.

DPTCloud Engineering4 phút đọc
Triển khai Distributed File System GlusterFS và Ceph

Nguồn ảnh: Alexas_Fotos · Pixabay Content License

Trong môi trường công nghệ hiện đại, việc triển khai hệ thống lưu trữ phân tán là yếu tố then chốt để đảm bảo tính sẵn sàng, khả năng mở rộng và hiệu năng cao cho các ứng dụng doanh nghiệp. Hai giải pháp hàng đầu trong lĩnh vực này là GlusterFS và Ceph, cả hai đều hỗ trợ lưu trữ phân tán, khả năng mở rộng và khả năng chịu lỗi. Bài viết này hướng dẫn chi tiết cách triển khai GlusterFS và Ceph trên hệ thống Linux, bao gồm các bước cài đặt, cấu hình, kiểm tra và tối ưu hiệu năng.

1. Giới thiệu về GlusterFS và Ceph

GlusterFS là một hệ thống lưu trữ phân tán mã nguồn mở, hoạt động dựa trên kiến trúc scale-out, cho phép tích hợp nhiều máy chủ lưu trữ thành một hệ thống thống nhất. GlusterFS thích hợp cho các ứng dụng cần lưu trữ lớn như video, hình ảnh, hoặc dữ liệu học máy.

Ceph là một hệ thống lưu trữ phân tán mạnh mẽ, hỗ trợ ba định dạng lưu trữ chính: block storage, object storage, và file storage. Ceph được thiết kế để hoạt động hiệu quả trong môi trường đám mây và doanh nghiệp, với khả năng tự phục hồi và mở rộng linh hoạt.

2. Yêu cầu và chuẩn bị

Để triển khai GlusterFS hoặc Ceph, bạn cần:

  • Ít nhất 3 máy chủ Linux (Ubuntu/CentOS) với kết nối mạng nội bộ ổn định.
  • IP tĩnh được cấu hình trên mỗi máy chủ.
  • Phần mềm cơ bản: ssh, vim, curl.
  • Không có dịch vụ firewall chặn các cổng cần thiết (GlusterFS: 24007-24009, Ceph: 6789, 7380).

3. Triển khai GlusterFS

Dưới đây là các bước cơ bản để cài đặt và cấu hình GlusterFS:

3.1. Cài đặt GlusterFS

Trên tất cả các máy chủ, chạy lệnh sau để cài đặt GlusterFS:

sudo apt update
sudo apt install glusterfs-server -y
sudo systemctl enable glusterd
sudo systemctl start glusterd

3.2. Thêm máy chủ vào cluster

Chọn một máy chủ làm master, sau đó thêm các máy chủ còn lại:

gluster peer probe 
gluster peer probe 

3.3. Tạo volume

Tạo một volume phân tán (distributed) hoặc phân tán + sao chép (distributed-replica):

gluster volume create gluster_vol distributed 3 :/brick1 :/brick1 :/brick1
gluster volume start gluster_vol

4. Triển khai Ceph

Ceph yêu cầu nhiều bước cấu hình hơn do hỗ trợ nhiều loại lưu trữ. Dưới đây là hướng dẫn cơ bản:

4.1. Cài đặt Ceph

Trên tất cả máy chủ, thêm repository và cài đặt Ceph:

sudo apt update
sudo apt install ceph-deploy -y

4.2. Tạo cluster Ceph

Chạy lệnh trên máy chủ quản lý (máy không chứa dữ liệu):

ceph-deploy new 
ceph-deploy install   
ceph-deploy mon create-initial
ceph-deploy osd create : : :

4.3. Kiểm tra trạng thái cluster

Chạy lệnh để kiểm tra trạng thái hoạt động:

ceph -s

5. Kiểm tra và tối ưu hiệu năng

Sau khi triển khai, kiểm tra hiệu năng bằng các công cụ như dd, fio, hoặc glusterfs-bench.

5.1. Kiểm tra hiệu năng với fio

Chạy lệnh kiểm tra tốc độ ghi/đọc:

fio --name=test --ioengine=libaio --rw=write --bs=4k --size=1G --numjobs=1 --runtime=60 --time_based --group_reporting

5.2. Tối ưu hiệu năng

  • Đảm bảo các máy chủ có kết nối mạng 10Gbps hoặc tốt hơn.
  • Chọn định dạng tệp phù hợp (XFS, ext4) cho hiệu năng cao.
  • Đặt noatime và nodiratime trong /etc/fstab.

6. Khắc phục sự cố

  • GlusterFS không nhận peer: Kiểm tra firewall, đảm bảo port 24007-24009 mở.
  • Ceph không khởi động: Kiểm tra log tại /var/log/ceph/, đảm bảo ceph-mon và ceph-osd đang chạy.
  • Volume không khởi động: Dùng gluster volume info hoặc ceph -s để kiểm tra trạng thái.

7. Tài liệu tham khảo

Việc triển khai GlusterFS và Ceph đòi hỏi sự hiểu biết về hệ thống lưu trữ phân tán. Tuy nhiên, với hướng dẫn chi tiết này, bạn có thể xây dựng một hệ thống lưu trữ mạnh mẽ, mở rộng và đáng tin cậy cho doanh nghiệp.

Tham khảo hạ tầng & bài viết liên quan: Cloud VPS RAM lớn cho Self-Host LLM & API Gateway

Hạ tầng DPTCloud Tier III

Cấu hình Cloud VPS RAM cao tối ưu cho AI, Database & Cache

SSD NVMe Enterprise RAID 10, đường truyền CMC & FPT Quận 9 chống DDoS Anycast, Uptime SLA 99.99%.

Xem 22 gói Cloud VPS
ECO · vn-02Khuyên dùng

VPS-4E

297.000 ₫ / tháng

Đã gồm VAT 10%

  • CPU: 4 vCPU
  • RAM: 8 GB
  • SSD: 50 GB NVMe
ECO · vn-02

VPS-5E

614.900 ₫ / tháng

Đã gồm VAT 10%

  • CPU: 8 vCPU
  • RAM: 16 GB
  • SSD: 100 GB NVMe
ADVANCED · vn-03Khuyên dùng

VPS-4T

548.900 ₫ / tháng

Đã gồm VAT 10%

  • CPU: 4 vCPU
  • RAM: 8 GB
  • SSD: 50 GB NVMe

Bài viết liên quan

Xem tất cả
ZaloChat Zalo 24/7Discord0384 753 478