事后检验
出自 MBA智库百科(https://wiki.mbalib.com/)
- 事后检验(Back Testing)
目录 |
什么是事后检验[1]
事后检验是指将市场风险计量方法或模型的估算结果与实际发生的损益进行比较,以检验计量方法或模型的准确性、可靠性,并据此对计量方法或模型进行调整和改进的一种方法。
事后检验的原理[2]
事后检验的目的,就是看实际观测到的结果与所定义风险度量的置信水平是否一致,如模型中定义了99%置信度下的风险值,那么,就要考察这个风险值是否真的覆盖了真实损失的99%。
事后检验一般采用一种移动窗口的方法进行计算。以1天的事后检验为例,先采用某种方法计算出给定头寸该交易日的VaR值,接着计算出该头寸在本交易日的实际损失额,进而判断计算出来的VaR值是否覆盖了实际损失额。然后,将VaR的计算窗口、待考察的交易日不断后移,计算并记录各交易日的超出情况。
事后检验的重要性[3]
1.通过对比实现的交易结果和模型产生的风险衡量结果,事后检验评价新模型和重估现有模型的准确性。
2.有助于分析改进风险管理技术的成本效益。
3.对公司层面总体收入的事后检验可以反映VaR估计的总体情况。
事后检验的方法[3]
主要有两种事后检验方法:根据实际交易损益进行事后检验、根据假设交易结果进行事后检验。
- (一)根据实际交易损益进行事后检验
根据实际交易损益对VaR进行事后检验的方法有两个:检验特定置信水平下的偏离、检验所有置信水平下的偏离。
1.检验特定置信水平下的偏离。
最直观的事后检验方法是画出日交易损益和预测VaR的散点图,然后监测偏离置信范围的数量。事后检验也可以用假设结果或者非行动交易损益(非行动交易损益假设保持今天的投资头寸不变直到预测期限结束,到那个时点再对投资头寸进行重新估值)。
一般来说,事后检验应该使用90天或以上的历史数据,而偏离数量应该在置信水平预测范围之内:如果使用1天95%的VaR,则期望有5%的向下偏离。如果实际偏离出现明显差异,就要分析错误来源。
2.检验所有置信水平下的偏离。
更好的事后检验是将实际收益分布与预测收益分布进行对比(即预测风险与实际风险的接近程度),检验所有置信水平下的偏离,对比预测误差分布与统一分布而评估模型。
- (二)根据假设交易结果进行事后检验
巴塞尔委员会鼓励金融机构同时使用假设交易结果和实际交易结果进行事后检验。假设交易结果或者非行动交易损益对更长期限的VaR估计特别有用,例如因为头寸每日变化很大,用非行动交易损益比用实际交易损益对lO天VaR进行事后检验更合理。
对非行动交易损益的事后检验程序和对实际交易结果的事后检验一样。
如何看待事后检验结果的合理性?即使取样于一个有95%绝对把握的完全已知分布,如果取100个样本,也有理由出现4或6、3或7个例外,所以事后检验有两种可能错误:(1)抛弃由于机会而表现不好、理论上正确的模型;(2)接受由于机会而表现好的错误模型。
有鉴于此,巴塞尔委员会建议将事后检验结果分为绿、黄、红三个区域,绿色代表模型有效的高概率范围,红色代表模型有缺陷的高概率范围,黄色是一个模糊区域而在采取行动前需要额外信息。