Báo cáo kiểm tra ngược mô hình Backtesting là gì?
Tiếng Anh: Model Backtesting Report
Báo cáo kiểm tra ngược mô hình là tài liệu ngân hàng trình bày kết quả so sánh giữa ước lượng rủi ro của mô hình và dữ liệu thực tế qua các kỳ trong quá khứ. Báo cáo giúp đơn vị quản trị rủi ro đánh giá độ tin cậy của mô hình và phát hiện suy giảm chất lượng dự báo.
Báo cáo kiểm tra ngược mô hình Backtesting là gì?
Báo cáo kiểm tra ngược mô hình Backtesting (tiếng Anh là Model Backtesting Report) là văn bản do đơn vị quản trị rủi ro hoặc kiểm toán nội bộ của ngân hàng lập, trình bày kết quả đối chiếu giữa ước lượng rủi ro của mô hình (chẳng hạn xác suất vỡ nợ, tỷ lệ tổn thất) với dữ liệu thực tế đã quan sát được trong quá khứ. Mục tiêu là xác định mô hình còn phù hợp hay đã suy giảm chất lượng.
Mục đích và khi nào áp dụng
Báo cáo được lập định kỳ theo chu kỳ quản trị rủi ro của ngân hàng, khi triển khai mô hình mới hoặc khi có thay đổi lớn về dữ liệu đầu vào. Báo cáo là căn cứ để hội đồng rủi ro quyết định tiếp tục sử dụng, điều chỉnh hay loại bỏ mô hình.
Các bước thực hiện
Quy trình lập báo cáo gồm các bước chính sau.
- Xác định mô hình cần kiểm tra ngược: Lựa chọn mô hình rủi ro trọng yếu theo danh mục mô hình của ngân hàng.
- Chuẩn bị dữ liệu: Tập hợp dữ liệu thực tế trong quá khứ và đảm bảo đồng nhất với dữ liệu đầu vào của mô hình.
- Chạy đối chiếu: So sánh ước lượng của mô hình với giá trị thực tế theo từng kỳ.
- Tổng hợp kết quả: Lập biểu mẫu, ghi nhận chênh lệch và nhận xét nguyên nhân.
- Trình hội đồng rủi ro: Trình bày báo cáo để hội đồng quyết định tiếp tục, điều chỉnh hay loại bỏ mô hình.
Bên tham gia và vai trò
Đơn vị phát triển mô hình cung cấp tham số và giả định, đơn vị quản trị rủi ro thực hiện đối chiếu, kiểm toán nội bộ kiểm soát chéo và hội đồng rủi ro phê duyệt kết luận.
Chứng từ thường liên quan
Tài liệu mô tả mô hình, tập dữ liệu dùng để kiểm tra ngược, biên bản họp hội đồng rủi ro và biểu mẫu tổng hợp kết quả.
Ví dụ minh hoạ
Tình huống giả định dưới đây minh hoạ một báo cáo cho mô hình ước lượng xác suất vỡ nợ.
Tình huống
Giả sử Ngân hàng A vận hành một mô hình ước lượng xác suất vỡ nợ cho danh mục cho vay bán lẻ và cần lập báo cáo kiểm tra ngược mô hình.
Các bước
- Với giả định trên, đơn vị quản trị rủi ro chọn dữ liệu thực tế của 12 tháng vừa qua và xác định tỷ lệ vỡ nợ thực tế trung bình là 2,1%/tháng.
- Với giả định trên, ước lượng trung bình của mô hình trong cùng 12 tháng là 1,6%/tháng.
- Với giả định trên, đơn vị tính chênh lệch tuyệt đối giữa ước lượng và thực tế cho từng tháng và ghi vào biểu mẫu báo cáo.
- Với giả định trên, hội đồng rủi ro nhận xét mô hình đang ước lượng thấp hơn thực tế và đề nghị điều chỉnh tham số.
Kết quả
Với giả định trên, báo cáo kết luận mô hình cần hiệu chỉnh trước khi sử dụng tiếp cho trích lập dự phòng.
Rủi ro và kiểm soát
Rủi ro chính là mô hình cho ước lượng lạc quan trong khi tổn thất thực tế tăng, dẫn đến trích lập dự phòng không đủ. Kiểm soát bằng cách đối chiếu nhiều kỳ, dùng nhiều tiêu chí và yêu cầu giải trình khi lệch vượt ngưỡng.
Phân biệt với quy trình gần giống
Dễ nhầm với báo cáo đánh giá mô hình ban đầu khi triển khai.
So sánh với Báo cáo đánh giá mô hình khi triển khai
| Tiêu chí | Báo cáo kiểm tra ngược mô hình Backtesting | Báo cáo đánh giá mô hình khi triển khai |
|---|---|---|
| Bản chất | So sánh ước lượng của mô hình với dữ liệu thực tế đã quan sát trong quá khứ | Đánh giá lần đầu trước khi đưa mô hình vào vận hành chính thức |
| Mục đích | Phát hiện suy giảm chất lượng mô hình theo thời gian | Xác định mô hình có đủ điều kiện triển khai hay không |
| Tần suất | Định kỳ hoặc khi có thay đổi lớn về dữ liệu | Một lần trước khi áp dụng |
Lưu ý và sai lầm thường gặp
Một số điểm cần lưu ý khi đọc và sử dụng báo cáo.
- Nhầm báo cáo kiểm tra ngược với báo cáo hiệu quả hoạt động của mô hình trong tương lai.
- Chỉ xét một kỳ ngắn, bỏ qua xu hướng dài hạn của sai lệch.
- Không ghi rõ phương pháp đối chiếu, khiến kết luận khó kiểm chứng lại.
- Đánh đồng mọi loại mô hình khi áp dụng cùng một ngưỡng sai lệch.
Lưu ý: Các ví dụ trong bài là ví dụ giả định để phục vụ giải thích khái niệm, cần kiểm chứng.
Câu hỏi thường gặp
Báo cáo kiểm tra ngược mô hình dùng để làm gì?
Dùng để đánh giá độ tin cậy của mô hình rủi ro bằng cách so sánh ước lượng với dữ liệu thực tế trong quá khứ.
Ai chịu trách nhiệm lập báo cáo?
Thông thường đơn vị quản trị rủi ro của ngân hàng, có thể kết hợp kiểm toán nội bộ.
Khi nào cần lập lại báo cáo?
Khi có chu kỳ định kỳ hoặc khi dữ liệu đầu vào thay đổi lớn.
Mô hình lệch bao nhiêu thì bị đánh giá không phù hợp?
Còn phụ thuộc ngưỡng nội bộ của từng ngân hàng và tiêu chí đã đặt ra trước.
Có khác gì với đánh giá mô hình khi triển khai?
Đánh giá khi triển khai xét trước khi áp dụng, còn kiểm tra ngược xét sau khi mô hình đã chạy thực tế.