1. Overview (Nền tảng dự án)

Công ty S (Starbucks) có ưu tiên hàng đầu là cung cấp các dịch vụ cốt lõi như hệ thống sự kiện có lưu lượng truy cập tập trung cực độ một cách ổn định. Trong khi phát triển hệ thống sự kiện cốt lõi này, công ty cần giải quyết đồng thời hai thách thức: vận hành ổn định cơ sở hạ tầng đám mây phức tạp (EKS, RDS, v.v.) và tối ưu hóa chi phí. MegazoneCloud đã hỗ trợ thành công dự án cốt lõi này bằng cách kết hợp chuyên môn vận hành cơ sở hạ tầng (Managed Services) và tự động hóa phát triển và vận hành dựa trên AI (AIR DevOps).

2. Challenge (Định nghĩa vấn đề)

• Tính không ổn định của lưu lượng truy cập vào giờ cao điểm: Trong thời gian sự kiện tần suất, lưu lượng truy cập tăng đột ngột, và các vấn đề vận hành cơ sở hạ tầng như cân bằng tải Aurora RDS hoặc Redis Failover đe dọa tính ổn định của dịch vụ.

• Độ phức tạp vận hành cơ sở hạ tầng và tăng chi phí: Cần giám sát liên tục các thành phần đám mây khác nhau như EKS, Cloudwatch, VPC Flow Log, phân tích nguyên nhân tăng chi phí Cloudwatch, dọn dẹp tài nguyên không sử dụng, v.v., đòi hỏi nỗ lực tối ưu hóa vận hành cơ sở hạ tầng phức tạp.

• Gánh nặng hợp tác giữa phát triển và vận hành: Trong quá trình phát triển và triển khai hệ thống sự kiện cốt lõi, việc xem xét kỹ thuật và lập kế hoạch hành động cho hiệu suất cơ sở dữ liệu (MySQL Parameter, Aurora Upgrade) và thay đổi kích thước cột bảng gây ra sự chậm trễ về thời gian.

3. Solution (Giải pháp)

MegazoneCloud cung cấp giải pháp toàn diện thông qua phương pháp AIR DevOps, từ giai đoạn phát triển ban đầu đến vận hành sau triển khai, và toàn bộ tối ưu hóa cơ sở hạ tầng.

• Hỗ trợ tối ưu hóa cơ sở dữ liệu và cơ sở hạ tầng có tính sẵn sàng cao: Xem xét chủ động phương pháp Aurora MySQL 3 Upgrade và kế hoạch rollback Blue/Green, hỗ trợ kích hoạt Redis Cluster Mode và logic tự động thêm Reader Instance để chuẩn bị cho lưu lượng truy cập vào giờ cao điểm.

• Đảm bảo chi phí và tính ổn định dựa trên AI Ops: Cung cấp phân tích nguyên nhân tăng chi phí Cloudwatch và các phương án giảm chi phí, đạt được tối ưu hóa chi phí cơ sở hạ tầng thông qua dọn dẹp tài nguyên không sử dụng. Ngoài ra, đề xuất phương án cảnh báo tiêu chuẩn Cloudwatch và cải tiến Whatap để tăng cường hệ thống giám sát dựa trên AI Ops.

• Tư vấn CI/CD và môi trường phát triển: Hướng dẫn phương án hành động và cách rút ngắn thời gian cho thay đổi kích thước cột bảng, chủ động ứng phó với phương án nâng cấp EKS và vấn đề EKS Autoscaler để đảm bảo tính ổn định của môi trường phát triển và triển khai.

4. Result (Kết quả)

Thông qua hỗ trợ của AIR DevOps, đã đạt được vận hành ổn định hệ thống sự kiện của khách hàng và tối ưu hóa chi phí cơ sở hạ tầng đồng thời.

• Đảm bảo tính ổn định vận hành dịch vụ cốt lõi: Thông qua cải thiện và tối ưu hóa các điểm yếu của cơ sở hạ tầng cốt lõi như EKS, Aurora RDS (Redis Failover, EKS Security Group issues, v.v.), đã giảm thiểu thời gian ngừng hoạt động của dịch vụ vào giờ cao điểm.

• Cải thiện hiệu quả phát triển/vận hành: Thông qua hỗ trợ kỹ thuật chủ động như phương án rút ngắn thời gian thay đổi bảng và phương án rollback Aurora Upgrade, đã rút ngắn thời gian phát triển và công việc liên quan cơ sở dữ liệu, nâng cao hiệu quả vận hành.

• Tối ưu hóa chi phí đám mây: Cung cấp phương án giảm chi phí Cloudwatch và dọn dẹp tài nguyên không sử dụng để giảm chi phí vận hành và cải thiện hiệu quả của cơ sở hạ tầng đám mây.