DataOps Platform · Module 01
Governance với Unity Catalog
Governance quyết định bạn có trả lời được câu hỏi cơ bản về hệ thống của mình không: ai đọc được gì, PII nằm ở đâu, đổi cột này thì vỡ cái gì.
Học xong bạn làm được
- Thiết kế catalog.schema.table theo môi trường
- Cấp quyền bằng GRANT theo least privilege
- Che PII bằng column mask và row filter
- Dùng lineage để phân tích tác động và trả lời yêu cầu xoá dữ liệu
Bài học
- catalog.schema.table và môi trường
Unity Catalog đặt mọi bảng vào tên ba tầng và quản lý quyền, lineage ở một nơi. Thiết kế catalog và schema là quyết định governance đầu tiên.
- GRANT và least privilege
Quyền trong Unity Catalog đi theo cây catalog, schema, table. Cấp cho group đúng mức tối thiểu, rồi kiểm chứng bằng quyền hiệu lực chứ không tin vào trí nhớ.
- Column mask và row filter
Che PII và lọc dòng theo người đọc ngay trên bảng gốc bằng hàm SQL, thay vì tạo bảng copy rồi để hai bảng lệch nhau.
- Lineage và yêu cầu xoá dữ liệu
Lineage cho biết bảng nào sinh ra từ bảng nào. Dùng nó để phân tích tác động trước khi đổi, và để lập kế hoạch xoá dữ liệu của một khách ở mọi nơi nó đang nằm.