Zero-Downtime Database Migrations: The Expand-Contract Incident Runbook
At 03:15 AM during a routine release, a deployment pipeline executed a single SQL statement on a live table with 80 million rows: SQL…
Read article
Chống bão Webhook trùng lặp: Thiết kế cơ chế Idempotency chuẩn xác với Redis & PostgreSQL
Khi tích hợp các cổng thanh toán (Stripe, VNPay, Momo) hoặc dịch vụ bên thứ ba, sự cố lớn nhất không phải là không…
Read article
Post-Mortem & Runbook Vận hành: Giải cứu Database 200 triệu dòng với PostgreSQL Declarative Partitioning
Vào 02:00 sáng một ngày cuối tuần, hệ thống cảnh báo ghi nhận đĩa cứng SSD của cụm Database chính chạm ngưỡng 98% dung…
Read article
Deep-Dive: Giải phẫu toán học XFetch và thiết kế khóa phân tán chống sập Database khi Cache hết hạn
Trong các hệ thống phân tán chịu tải lớn, thời điểm một key bộ nhớ đệm (Cache) hết hạn không đơn thuần là một…
Read article
Bảng so sánh 3 cơ chế chống sập API: Timeout, Retry vs. Circuit Breaker
Khi gọi các dịch vụ bên ngoài (Payment Gateway, SMS OTP, Logistic API), hầu hết lập trình viên chỉ dùng lệnh try-catch hoặc thêm…
Read article
Mổ xẻ sự cố 504 Gateway Timeout: Hành trình đưa tác vụ LLM ra khỏi HTTP Request
Tuần trước, một tính năng mới cho phép người dùng đăng tải hợp đồng 30 trang để AI tóm tắt đã khiến cụm API…
Read article
Kỹ thuật Direct Upload tệp lớn S3/Cloudflare R2 bằng Presigned URL
Đừng để Web Server hứng File Upload: Kỹ thuật Direct-to-Storage bằng Presigned URL Mô hình tải tệp truyền thống thường đi theo đường vòng:…
Read article
Khi một bảng phình to 100 triệu dòng: Kỹ thuật Table Partitioning cứu nguy Database
Khi cơ sở dữ liệu vượt ngưỡng hàng chục triệu bản ghi, thao tác bảo trì như VACUUM, re-index, hoặc xóa dữ liệu cũ…
Read article
Khi Redis hết hạn và Database sập nguồn: Kỹ thuật xử lý triệt để Cache Stampede
Bộ nhớ đệm (Cache) là tấm lá chắn giúp cơ sở dữ liệu chịu được hàng chục ngàn lượt truy cập mỗi giây. Nhưng…
Read article
Khi API đối tác “chết lâm sàng”: Cứu cả hệ thống bằng Circuit Breaker Pattern
Phần lớn các sự cố sập server diện rộng (Cascading Failure) không bắt nguồn từ mã nguồn nội bộ, mà đến từ các dịch…
Read article