DataOps Peach

DataOps Platform · Chi phí và phục vụ BI · Bài 4/4

Grain của gold quyết định hoá đơn

Dashboard quét bảng gold mỗi lần có người mở. Gold ở grain giao dịch "để linh hoạt" nghĩa là quét hàng triệu dòng hàng nghìn lần mỗi ngày; gold tổng hợp đúng mức trả cùng câu trả lời với một phần nhỏ chi phí.

Học tương tác →

Dashboard nhân chi phí lên

Chi phí đọc của một dashboard mỗi ngày xấp xỉ:

số biểu đồ × số người xem × số lần mở mỗi người × chi phí một câu

12 biểu đồ, 30 người, mỗi người mở 3 lần là 1080 câu SQL mỗi ngày. Nếu mỗi câu quét 5 triệu dòng thay vì 5 nghìn, chi phí của cả 1080 câu nhân theo.

Tình huống giả định: dashboard 12 biểu đồ DirectQuery trên bảng 800 triệu dòng tốn khoảng 22.000 USD/tháng compute. Thay bằng bảng gold 40.000 dòng ở grain ngày × vùng × sản phẩm và chế độ Import: khoảng 900 USD/tháng, dashboard mở nhanh hơn.

Chọn grain

Grain là "một dòng của bảng là gì" (Track 1 Module 03). Gold phục vụ dashboard nên có grain thô nhất mà vẫn trả lời được mọi câu hỏi của dashboard:

Gold chỉ là "silver đổi tên" - cùng grain giao dịch, chỉ đổi tên cột - là dấu hiệu tầng gold chưa làm việc của nó: mọi tổng hợp bị đẩy sang dashboard, và chạy lại ở mỗi lần mở.

Grain quá mịn "để linh hoạt" không miễn phí: sự linh hoạt đó được trả bằng tiền mỗi ngày. Thêm một bảng gold khác khi có câu hỏi mới rẻ hơn nhiều so với cho mọi dashboard quét bảng chi tiết.

Trong bài

flowchart LR
  F[fact_grain_tx · 5.372.000 dòng] -->|GROUP BY ngày, kênh, sản phẩm| G[daily_channel_product · 3896 dòng]
  F -.->|mỗi lần mở: quét hàng triệu dòng| D[dashboard]
  G -->|vài nghìn dòng| D
  G --> A[alert doanh thu]

Alert doanh thu bất thường

Bảng gold nhỏ cũng là nơi rẻ để đặt alert. Quy tắc mẫu: doanh thu ngày mới nhất dưới 50% trung bình 7 ngày trước đó thì báo. Câu SQL tính tỉ lệ; Databricks SQL Alert chạy câu đó theo lịch và gửi thông báo khi ti_le < 0.5. Ngày cuối của dữ liệu lab (31/01/2026) có tỉ lệ 0,73: chưa tới ngưỡng.

Tạo alert trong giao diện (SQL > Alerts) hoặc bằng databricks alerts create; trường JSON của lệnh này đổi theo phiên bản CLI, xem databricks alerts create --help.

Lỗi hay gặp

Dọn sau module: DROP TABLE IF EXISTS workspace.gold.fact_grain_tx (bảng 5 triệu dòng chỉ để học); giữ daily_channel_product và mv_daily_revenue nếu muốn dùng tiếp.

Học tương tác →