小心背部测试- Validea的大师投资者博客万博manbetx网页版登录

作者:Jack Forehand, CFA, CFP®(@practicalquant) - - -

积极型投资经理的长期记录相当糟糕。根据研究对象的不同，80%到90%的基金经理在扣除费用后的长期业绩表现低于基准。

但如果我告诉你有办法把这些结果颠倒过来呢?如果有一个世界，经理们90%的时间都能超过他们的基准会怎样?如果有这样一个世界，经理们知道如何在任何市场环境下提前配置他们的投资组合，并能够根据市场抛给他们的任何东西进行调整，那会怎么样?

我想第一个告诉你，这个世界确实存在。这种投资经理能够超越基准、能够限制损失或完全避开熊市、在时机合适时毫不费力地在价值和增长之间转换的极乐世界已经成为现实。

这个世界就是反向测试的世界。

现在你可能已经从我上面说的事情中感觉到一点(或很多)讽刺，这是有充分理由的。反向测试是投资管理中最常被滥用的工具之一。随着追求更积极的投资策略的电脑化投资和指数etf的兴起，我们看到越来越多的投资产品的回测结果。事实上，许多支持价值和动量等指标的证据都是基于对影响股价因素的历史检验，而这些指标在无数投资产品中都得到了应用。

然而，作为一名投资者，非常重要的是要理解反测结果意味着什么，以及它们可以为它们所代表的投资策略提供什么见解(如果有的话)。

我不想给人留下所有回测都不好的印象。反向测试是一个非常重要的工具，我们所有使用量化策略的人都可以利用它来帮助开发和优化投资策略。问题是，公开展示的大部分反向测试都存在这样或那样的缺陷。即使是最好的反向测试也不能完美地模拟实际投资组合的运行情况。

经过多年的测试运行和结果分析，我开发了一个检查列表，列出了在评估它们时要寻找的一些最重要的东西。其中一些东西本质上是技术性的，通常不会在您看到的最终结果中披露，但所有这些东西在确定应该给予测试输出的信任程度方面都非常重要。

这里有一些需要注意的关键事项。

1 -测试是否考虑了人类的情感?

这显然是一个刁钻的问题，因为反向测试无法解释投资中的人为因素。这种人为因素在两个方面发挥作用。首先，一个策略的管理者很可能在现实世界中的某个时刻偏离它。即使这是一种量化策略，当它不起作用时，改变它的诱惑也会很强。其次，投资者在投资过程中也很可能出现恐慌，做出糟糕的决策。这两种情况都可能导致真实世界的结果明显比后面的测试差。很难量化糟糕到什么程度，但该策略在低迷期损失得越多，偏离基准越远，差距可能就越大。

2 -这个策略背后有经济原因吗?

当您测试某些东西时，用于测试的输入以某种直观的方式与输出相关是非常重要的。换句话说，如果你测试一个将估值与股价联系起来的策略，这是有意义的。如果你用股票价格来测试月亮周期的阶段，就不会出现这种情况。我们在播客中与一些机器学习专家交谈过，他们不同意这一规则，因为他们有时发现，最不合理的信号往往会持续更久，因为它们没有被其他投资者广泛使用，但当涉及到长期基本面策略时，我认为这一规则仍然适用。

3 -测试是否涵盖很长一段时间?

市场的周期可能比你想象的要长得多。在很长一段时间内，投资风格可以时兴时衰。重要的是，任何投资策略都要表明它可以在多个市场周期中表现良好，以确保其表现不只是一种不会长期持续的趋势的结果。如果你对截至2020年的10年进行测试，你可能会得出这样的结论:价值投资是浪费时间，而成长型投资会产生显著的跑赢表现。然而，看看50年的数据(以及过去几年的数据)，会得出相反的结论。

即使是20年以上的时期也会有问题。例如，考虑到许多人认为债券在市场下跌时为股票提供了对冲。如果你看看过去的30年，你会发现有力的证据支持这一说法。不过，一个主要的例外是，在高通胀时期，股票和债券都可能陷入困境。如果一个测试不包括20世纪70年代(以及当前的通货膨胀时期)，就完全错过了这一点。

4 -测试是否显示了投资策略挣扎的时期?

如果某件事好得不像真的，那它几乎总是假的。每一种投资策略都会经历失败的时期。如果你看到一个不包括这些时期的反向测试，你应该跑，而不是走，远离它用来宣传的投资策略。除了确保它们的存在，策略挣扎的时期也可以教会你很多。例如，如果一种策略在通货膨胀的环境下挣扎，而且你预计未来会出现高通货膨胀，那么即使它有很强的背验，你也可能想要避免它。

5 -它是否假设了直到事实之后才可用的知识?

这是反向测试中常见的问题。事后发生了什么很容易知道。现在很容易知道，价值投资从2007年起就没有起作用。当时不可能知道这一点。如果我用现在的知识回过头去寻找2007年开始可能让我避开价值的指标，我很容易就能找到它们。但这在当时并不明显。任何好的反向测试都应该只包含当时已经知道的内容，而不是事后才变得明显的信息。这个规则很容易在不知道的情况下被打破，因为我们都知道过去发生了什么，我们无法避免。例如，如果我正在测试一种债券策略，并为它制定规则，我很难不把利率从1980年开始连续40年下降的知识纳入我的思考过程中。

这绝不是一个包含所有内容的列表，还有许多其他更技术性的东西(如测试样本外的策略和避免生存偏差)是成功的反向测试的关键。但这里最重要的一点是应该带着一定程度的怀疑态度来看待背测．如果使用得当，反向测试可以成为评估投资策略利弊的有用工具。但通常情况下，它们被用作营销工具，并不能准确描述一种策略在现实世界中的表现。

像投资中的其他事情一样，常识性的方法可以帮助避免依赖明显有缺陷的测试结果。如果某件事看起来好得像真的，它很可能就是真的。也许没有比反向测试更适合投资的领域了。