Kiểm tra ngược mô hình là gì?
Tiếng Anh: Model Backtesting
Kiểm tra ngược mô hình là quy trình đối chiếu kết quả dự báo của một mô hình rủi ro với dữ liệu thực tế đã xảy ra. Hoạt động giúp ngân hàng phát hiện sai lệch, cập nhật giả định và nâng cao độ tin cậy của mô hình trong quản trị rủi ro.
Kiểm tra ngược mô hình là gì?
Kiểm tra ngược mô hình (tiếng Anh là Model Backtesting) là quy trình ngân hàng chạy lại mô hình rủi ro trên dữ liệu quá khứ rồi so sánh với kết quả thực tế. Mục tiêu là đánh giá xem mô hình có còn phù hợp hay cần chỉnh sửa.
Đặc điểm chính
Kiểm tra ngược mô hình dựa trên dữ liệu lịch sử, sử dụng các tiêu chí định lượng đã định sẵn và được thực hiện định kỳ hoặc khi điều kiện thị trường thay đổi đáng kể. Kết quả kiểm tra là căn cứ để điều chỉnh tham số hoặc thay thế mô hình.
Cách hoạt động
Ngân hàng lấy tập dữ liệu quá khứ đã xảy ra, chạy lại mô hình và ghi nhận kết quả dự báo. Các con số dự báo được đối chiếu với số liệu thực tế để tính độ lệch. Nếu độ lệch vượt ngưỡng cho phép, mô hình được xem xét hiệu chỉnh.
Vai trò trong hoạt động ngân hàng
Trong quản trị rủi ro, kiểm tra ngược giúp duy trì chất lượng mô hình xác suất vỡ nợ, mô hình tổn thất hoặc mô hình đo lường rủi ro thị trường. Hoạt động này là một phần trong chu trình quản trị mô hình nội bộ và hỗ trợ kiểm soát rủi ro mô hình.
Ví dụ minh hoạ
Tình huống giả định dưới đây minh hoạ cách so sánh kết quả mô hình.
Tình huống
Giả sử Ngân hàng A dùng một mô hình ước lượng xác suất vỡ nợ cho danh mục cho vay bán lẻ và thực hiện kiểm tra ngược trên dữ liệu ba tháng vừa qua.
Các bước
- Với giả định trên, trong nhóm khách hàng được mô hình xếp vào phân khúc rủi ro cao, có 100 khách hàng và mô hình dự báo trung bình tỷ lệ vỡ nợ là 5% tương đương 5 khách hàng.
- Với giả định trên, số khách hàng thực tế vỡ nợ trong nhóm này sau ba tháng là 8 khách hàng.
- Với giả định trên, chênh lệch giữa dự báo và thực tế = 8 − 5 = 3 khách hàng, tức 3 điểm phần trăm.
Kết quả
Với giả định trên, mô hình ước lượng thấp số lượng vỡ nợ nên Ngân hàng A xem xét cập nhật tham số hoặc bổ sung biến số.
Ghi chú
Ngưỡng chênh lệch và cách xử lý do từng ngân hàng quy định nội bộ.
Phân biệt với khái niệm gần giống
Kiểm tra ngược mô hình dễ bị nhầm với kiểm thử mô hình.
So sánh với Kiểm thử mô hình
| Tiêu chí | Kiểm tra ngược mô hình | Kiểm thử mô hình |
|---|---|---|
| Mục đích | Đánh giá độ chính xác của dự báo trên dữ liệu cũ | Kiểm tra tính đúng đắn kỹ thuật trước khi đưa vào dùng |
| Thời điểm | Sau khi mô hình đã triển khai | Trước và trong giai đoạn phát triển |
| Dữ liệu sử dụng | Dữ liệu quá khứ đã có kết quả thực | Dữ liệu kiểm thử độc lập hoặc dữ liệu mẫu |
Lưu ý và sai lầm thường gặp
Một số điểm cần nhớ.
- Nhầm kiểm tra ngược với kiểm thử mô hình trong giai đoạn phát triển.
- Dùng dữ liệu chưa xảy ra để đánh giá mô hình.
- Chỉ thực hiện một lần thay vì định kỳ.
- Bỏ qua việc cập nhật khi điều kiện thị trường thay đổi đáng kể.
Công thức
Công thức: Chênh lệch = Giá trị thực tế − Giá trị dự báo
- Chênh lệch: độ lệch giữa thực tế và dự báo
- Giá trị thực tế: kết quả xảy ra trong dữ liệu lịch sử
- Giá trị dự báo: kết quả mô hình sinh ra khi chạy lại
Lưu ý: Các ví dụ trong bài là ví dụ giả định để phục vụ giải thích khái niệm, cần kiểm chứng.
Câu hỏi thường gặp
Kiểm tra ngược mô hình được thực hiện khi nào?
Thường thực hiện định kỳ theo chu trình quản trị mô hình và khi có thay đổi lớn về dữ liệu hoặc điều kiện thị trường.
Tại sao cần kiểm tra ngược mô hình?
Để phát hiện sai lệch giữa dự báo và thực tế, từ đó điều chỉnh mô hình và bảo đảm chất lượng quản trị rủi ro.
Dữ liệu nào được dùng để kiểm tra ngược?
Dữ liệu lịch sử đã có kết quả thực tế để so sánh với dự báo của mô hình.
Kết quả kiểm tra ngược dùng để làm gì?
Làm căn cứ cập nhật tham số, bổ sung biến số hoặc thay thế mô hình nếu cần.