Skip to content

6.7 复盘与校准:哪种分析对你真的有用

难度★★★

This page hasn’t been translated into English yet, so you’re reading the Chinese original. Chapters are being translated one by one.

如果有人问你:过去几个月,你对市场的判断准不准?多数人会先想起猜对的那几次,猜错的几次却记不清;知道结果以后,还会觉得「我早就知道」(4.2 的事后偏差)。所以「宏观分析对我没用」「我看图比看新闻准」这类说法,只凭记忆是无法检验的。

第4–6章你已经写了十几张观点卡。每张都在事件之前写下了结论、概率和四个判断,到了复查日按原文打分(4.7)。哪一种分析对你有用,只能照这些卡的原文统计。

单张卡怎样打分,4.7 已经讲过:Brier 分数、技能分、「一直写 50%」和「一直写基准率」两条参照线,以及为什么至少要上百张卡,才能分清「我的 70% 其实只有 60%」。这一节接着回答复盘时的几个问题:卡怎样分组统计?自己写的概率比基准率好还是差?两组之间的差距是能力还是运气?知道了以后,改什么、怎样改?

你的卡还没有达到闸门 1 要求的张数时(见闸门 1 自查),先用下面的 12 张示例卡学方法,张数够了再复盘自己的卡。

按视角统计:四个判断各算命中率

Section titled “按视角统计:四个判断各算命中率”

命中率(hit rate)是判断正确的张数 ÷ 作出这个判断的张数;卡上写「不判断」的那一项不计入。它与盈利概率(12.4)不同:盈利概率是交易的盈利笔数 ÷ 总笔数,命中率统计的是观点卡判断正确了几张。

复盘分两层,因为卡上写了两种东西:

  • 结论:结论附有写下的概率,所以用 Brier 分数打分(4.7)。按视角分组以后,每组算结论的命中率和平均 Brier 分数。
  • 四个判断:方向、幅度、时间、波动率各自记录对错,各算一个命中率。结论错误时,常常只错在其中一项,分开统计才知道是哪一项。其中「时间」记录的是等待的事件是否在窗口内发生。

分组的依据是写卡时就标好的主要视角:宏观、政策、行业、公司、价格与情绪(分类见 4.1 和 6.1–6.4)。复盘时才回头决定一张卡属于哪个视角,就会不自觉地把猜对的卡归到自己想证明的那一组。交易卡和练习卡(6.5)一起统计:练习卡同样在复查日打分,计入命中率、Brier 分数和下文的校准图。

例子:第6章结束时的 12 张卡(示例数据,非实时;✓ 对,✗ 错,— 不判断)。先看每张卡的结论:

卡 · 视角 结论(简写) 概率 成立 Brier
1 宏观 CPI 当天 SPY 涨跌幅在 ±1.5% 以内 70% ✓ 0.09
2 宏观 FOMC 后 5 个交易日 SPY 收盘高于会前 60% ✗ 0.36
3 宏观 非农当天 QQQ 跌幅超过 1% 55% ✗ 0.3025
4 政策 关税截止日前一周 VIX 收盘不超过 25 65% ✓ 0.1225
5 政策 政府停摆在月底前结束 80% ✗ 0.64
6 行业 XLE 两周内跑赢 SPY 55% ✓ 0.2025
7 行业 SMH 一个月内跑输 SPY 60% ✗ 0.36
8 公司 NVDA 财报后首个交易日涨跌幅在 ±7.6% 以内 60% ✓ 0.16
9 公司 AAPL 财报后 2 周内收盘不跌破 $320 65% ✓ 0.1225
10 公司 AAPL 发布会后一周 IV 回落 3 个点以上 70% ✓ 0.09
11 价格与情绪 SPY 30 天后收盘仍在 1σ 区间内 70% ✓ 0.09
12 价格与情绪 AAPL 一个月内收盘站上 $350 55% ✗ 0.3025

再看每张卡的四个判断:

卡 方向 幅度 时间 波动率
1 — ✓ ✓ ✓
2 ✗ — ✓ ✗
3 ✓ ✗ ✓ —
4 — ✓ ✓ ✓
5 — — ✗ —
6 ✓ — ✓ —
7 ✗ — ✓ —
8 — ✓ ✓ ✓
9 ✓ ✓ ✓ ✓
10 — — ✓ ✓
11 — ✓ ✓ —
12 ✓ — ✗ —

第一步:按视角汇总结论。每个视角数出张数和结论成立的张数,再把这一组的 Brier 分数相加、除以张数。以宏观为例:3 张中成立 1 张;平均 Brier = (0.09 + 0.36 + 0.3025) ÷ 3 = 0.7525 ÷ 3 ≈ 0.25。其余各组照此计算:

视角 张数 结论成立 平均 Brier
宏观 3 1 0.25
政策 2 1 0.38
行业 2 1 0.28
公司 3 3 0.12
价格与情绪 2 1 0.20
合计 12 7(58%) 0.24

第二步:四个判断各算命中率。每一列只数写了 ✓ 或 ✗ 的卡:方向 6 张中对 4 张(4/6),幅度 5/6,时间 10/12,波动率 5/6。

第三步:读出这两张表说明了什么。12 张卡分到每个视角只有 2–3 张,这样的数据能提示哪里经常出错,却还看不出哪个视角有用(原因见下文「样本量」)。

  • 公司视角 3/3、平均 Brier 0.12,看起来最好。然而它只有 3 张,其中两张的结论本来就有不低的基准率(第 8、10 张,见下一部分)。
  • 政策视角的 0.38 最差,几乎全部来自第 5 张:这张写了 80% 而结论不成立,一张就得 0.64。概率写得越高,判断错误时的分数越差(4.7)。
  • 时间 10/12 几乎全对,因为多数窗口对准的是 CPI、FOMC、财报这类日期固定的事件。有用的是两次错误:第 5 张的停摆持续到了月底之后;第 12 张的 AAPL 后来确实站上了 $350,但比窗口晚了一周。两张等待的都是没有固定日期的事件,窗口写得太短。
  • 第 3 张方向正确而结论错误:QQQ 确实下跌了,但跌幅不到 1%。如果只看方向,就会高估自己的判断。

公司视角 3 张全部成立,能说明公司分析有效吗?还不能,因为有的结论本来就容易成立。要知道分析有没有增加信息,就要问:当初如果不分析,直接写基准率(4.1),分数会是多少?

4.7 的参照线「一直写基准率」,适用于同一类卡:它们有共同的基准率 p,参照线就是 p × (1 − p)。观点日志里的卡却各属不同的类别,CPI 日的涨跌幅和 AAPL 发布会后的 IV 没有共同的基准率。所以复盘时逐张计算:每张有基准率的卡,算出「当初如果写基准率」的 Brier 分数 (基准率 − 结果)²,再把这些分数相加,作为参照线。自己的合计低于这条参照线,才说明分析在基准率之上增加了信息。技能分的算法照 4.7:1 − 自己的合计 ÷ 参照线的合计。

例子:12 张卡里有 4 张查到了基准率。下表括号里是每张卡的 Brier 分数:

卡 你写的 写基准率
1 CPI 当天 SPY ±1.5% 以内 70%(0.09) 过去 24 次 CPI 日,20 次在内:83%(0.03)
8 NVDA ±7.6% 以内 60%(0.16) 过去 8 次财报,5 次在内:62.5%(0.14;5.9)
10 AAPL 发布会后 IV 回落 70%(0.09) 过去 6 次发布会,5 次回落:83%(0.03)
11 SPY 在 1σ 区间内 70%(0.09) 市场定价约 68%(0.10;还没有历史基准率)
Brier 合计 0.43 0.30

以第 8 张为例:基准率 62.5%,结论成立,写基准率的分数是 (0.625 − 1)² ≈ 0.14。四张卡的结论都成立了,可是直接写基准率(第 11 张写定价),合计 0.30,比实际写下的 0.43 还低。技能分 = 1 − 0.43 ÷ 0.30 ≈ −0.43。技能分是负数,说明在这四张卡上,自己的分析不如直接写基准率。

原因在哪里?第 1、10 张写的概率比基准率还低(70% 对 83%),也就是比历史频率更不相信这件常发生的事。这要么是写下了和市场的分歧,要么只是习惯性的保守;复盘时翻回卡上「和市场的分歧」一栏,就能分清是哪一种。第 11 张的分数略好(0.09 对 0.10),但 70% 和 68% 几乎相同,本来就没有分歧。

第 11 张的 68% 是按 IV 算出的定价,不是过去的频率。IV 平均高于随后的实现波动率(9.1),所以按 IV 画出的 1σ 区间偏宽,历史上收盘落在区间内的比例往往高于 68%。按当天的 VIX 计算,标普 500 自 1990 年以来约为 84%(6.2、数据与证据)。这一类卡应当先到那里查基准率。如果第 11 张改用 84% 作参照,写基准率一栏的合计约 0.22,技能分约 −0.9,结论不变。

没有基准率的卡,例如第 5 张,要先去找。停摆、关税都有历史记录可查,见 4.5 和 4.6。如果确实找不到,就以 50% 为参照线比较,并在卡上写明「没有基准率」。

上面的数字里,哪些差距是真的,哪些只是运气?例如公司 3/3、宏观 1/3,相差很大,可是每组只有 3 张。要回答这个问题,先要知道一个命中率会随偶然因素变动多少。

样本量(sample size)是用来计算一个比例或平均数的张数或笔数。样本量越小,算出的命中率受偶然因素的影响越大。

标准误(standard error,SE)衡量的就是这种影响:它是一个比例随样本偶然变动的幅度。设命中率是 p,卡的张数是 n,各张卡的结果互不影响。4.7 讲过,命中张数的标准差是 √(n × p × (1 − p));命中率是命中张数 ÷ n,所以把标准差也除以 n,就得到命中率的标准误:

SE=p(1−p)n\text{SE} = \sqrt{\frac{p(1-p)}{n}}

偶然波动很少超过 2 个标准差(0.7),所以粗略的范围取 p ± 2 SE,大约有 95% 的把握。这一节把这个范围叫作运气范围:差距落在范围以内,运气就能解释它。11.1 用同样的方法看交易的平均盈亏。

命中率 70%、10 张卡时,SE = √(0.7 × 0.3 ÷ 10) ≈ 0.145,即 14.5 个百分点。粗略范围是 70% ± 29%,即 41%–99%。范围的下沿低于 50%,所以 10 张中 7 张还不能说明判断优于抛硬币;有基准率时,拿下沿与基准率比。

标准误与 √n 成反比,所以张数从 10 增加到 100,标准误只缩小到约三分之一:

张数 n 命中率 70% 的标准误 粗略范围(±2 SE)
10 14.5 个百分点 41%–99%
30 8.4 个百分点 53%–87%
100 4.6 个百分点 61%–79%

同样命中 70%:10 张的粗略范围是 41%–99%,100 张才收窄到 61%–79%

粗略的范围是 p ± 2 SE,标准误 = √(p(1 − p) ÷ n)(示例数据,非实时)· 实线是 50%

50%命中率 70%

10 张标准误 14.5 个百分点

41%–99%

30 张标准误 8.4 个百分点

53%–87%

100 张标准误 4.6 个百分点

61%–79%

10 张的范围包含 50%:10 张中 7 张,还不能说明判断优于 50%。一个视角积累到 ≥30 张、标准误降到 8–9 个百分点之后,再进行比较。

样本量与粗略范围 · 命中率 70%

因此,10 张卡能检查的是写卡的规则是否执行完整:字段是否齐全,是否在事件之前写好,是否在复查日打分。它也能发现明显的问题,例如每张都写 70%,或者写 80% 以上的卡错了好几张。然而 10 张卡的粗略范围宽达 41%–99%,看不出哪个视角有用,也看不出写下的 70% 是否真的是 70%。

张数很少时,公式本身也不可靠。公司视角 3/3 的命中率是 100%,代入公式,标准误是 0;这不是说没有误差,而是 3 张太少,公式不适用。张数少时,多中或少中一张,命中率就变动很多:10 张时一张就是 10 个百分点。

比较两个视角时,要看两个命中率之差是否超出运气范围。两组卡互不影响时,差值的标准误等于两个标准误平方和的平方根:

SE1−2=p1(1−p1)n1+p2(1−p2)n2\text{SE}_{1-2} = \sqrt{\frac{p_1(1-p_1)}{n_1} + \frac{p_2(1-p_2)}{n_2}}

例子:假设之后价格与情绪的卡命中 7/10(70%),宏观的卡命中 3/8(37.5%),相差 32.5 个百分点。

  1. 两组各自的方差项:0.7 × 0.3 ÷ 10 = 0.021;0.375 × 0.625 ÷ 8 ≈ 0.0293。
  2. 差值的标准误 = √(0.021 + 0.0293) ≈ 0.224,即 22.4 个百分点;两倍约为 45 个百分点。
  3. 实际相差 32.5 个百分点,小于 45,所以这个差距仍在运气范围内,还不能说明价格与情绪的卡更准。

所以,一个视角积累到 ≥30 张、标准误降到 8–9 个百分点之后,再进行比较。两组都有 30 张以上,差距也超过两倍标准误,才能初步认为一组更准;即使这样,也要先查两组的基准率和过程分(下文),确认不是另一组问了更难的问题。在那之前只记录、不下结论,复盘时写「只记录」。

同时比较的组越多、每月重复比较的次数越多,越容易碰巧出现超过两倍标准误的差距:5 个视角两两比较就有 10 对,每一对碰巧超过的机会约 5%,每月比较一次,一年下来几乎一定会「发现」差距。这就是 6.1 讲的数据挖掘。所以事先只指定要比较的两组,或者把门槛提高到三倍标准误。

4.7 算过,要分清「70% 其实只有 60%」这样 10 个百分点的差距,至少要上百张卡。所以第4–6章的十几张卡,用来练习方法和养成习惯,不用来下结论。

按视角分组,问的是哪一种分析准;按写下的概率分组,问的是你写的数字准不准。校准图(calibration plot,4.7)按写下的概率分档,例如 50–59%、60–69%……,画出每档实际成立的比例。点落在对角线上,说明校准良好。写下的概率在 50% 以上时,点落在对角线下方说明过度自信,例如写八成的事只发生了一半;落在上方说明过于保守。写下的概率在 50% 以下时方向相反:写三成的事只发生了一成,点在对角线下方,说明写得不够极端,是过于保守。

然而,一档只有 10 张卡时,即使偏离对角线 20 个百分点,也可能只是运气。所以每档都要画出运气范围:以这一档的中点为中心(例如 70–79% 一档按 75% 算;这一档的卡都写同一个概率时,就用这个概率),±2 个标准误。即使校准得完全准确,每档的成立比例也会在这个范围内波动;落在范围以外,才说明这一档确有偏差。

例子:到毕业前后,观点日志约有 80 张卡,即第4–6章的 12 张,加上第7章起每周 2–3 张。

你写的概率 张数 成立 成立比例 运气范围(±2 个标准误)
50–59%(按 55% 算) 20 11 55% 33%–77%
60–69%(按 65% 算) 30 18 60% 48%–82%
70–79%(按 75% 算) 20 12 60% 56%–94%
80–89%(按 85% 算) 10 5 50% 62%–100%

以 80–89% 一档为例:

  1. 中心是写下的概率 85%,张数 10。
  2. 标准误 = √(0.85 × 0.15 ÷ 10) ≈ 0.113,即 11.3 个百分点。
  3. 运气范围是 85% ± 22.6%,即 62.4%–107.6%;比例不能超过 100%,所以上限封顶在 100%,写成 62%–100%。
  4. 实际成立 5/10 = 50%,低于下沿 62%。
示例数据:约 80 张观点卡按写下的概率分四档 · 浅色带是运气范围(±2 个标准误)
示例数据:约 80 张观点卡按写下的概率分四档 · 浅色带是运气范围(±2 个标准误)

读法:

  • 最需要改进的是高概率的卡:80–89% 一档只成立了 50%,低于运气范围的下沿 62%。它离中心 85% 约 3 个标准误(35 ÷ 11.3 ≈ 3.1),即使同时看 4 档、碰巧有一档越出两倍标准误并不稀奇,运气也解释不了这么大的偏差。
  • 70–79% 一档的 60% 低于写下的概率,但仍在运气范围内,先记录下来。
  • 50–69% 两档在对角线附近,也落在运气范围内。

这样的偏差很常见:多数人高估自己的知识,专业人士也不例外。在杜克大学的 CFO 调查里,CFO 给出的标普 500 一年收益率的 80% 区间,只包含了约 36% 的实际结果。校准是可以练出来的,方法就是观点日志做的事:每次写下概率,到期核对结果。

延伸阅读:过度自信与校准的研究

气象预报员的校准较好,多半是因为他们多年来每天写下概率、每天核对结果。其他研究发现,多数人和专家都高估自己的知识。

研究 样本 发现
Murphy 与 Winkler(1977) 美国气象局的降水概率与气温预报 预报的概率和实际频率很接近
Lichtenstein、Fischhoff 与 Phillips(1982) 1980 年以前的校准研究综述 大多数人高估自己的知识
Ben-David、Graham 与 Harvey(2013) 杜克大学 CFO 调查,13,000 多个预测 80% 区间只包含约 36% 的实际结果
Tetlock(2005) 数百位专家多年的政治与经济预测 一般专家只比随机猜测略好
Barber 与 Odean(2000) 1991–1996 年,一家折扣券商的 66,465 个家庭 交易最多的 20% 家庭跑输市场
  • Lichtenstein 等:大多数任务里都有这种高估,题目越难越明显。要求给出 98% 的范围时,有 20–50% 的真值落在范围外,而按 98% 的说法只应有 2%。
  • Ben-David 等:预测的是 2001–2011 年标普 500 的一年收益率。
  • Tetlock:一般专家还略差于简单的外推规则;兼听多种观点的「狐狸」稳定地胜过只相信一个大理论的「刺猬」。
  • Barber 与 Odean:交易最多的 20% 家庭,扣除成本后年收益率 11.4%,同期市场 17.9%;作者认为过度自信能解释过多的交易。

训练能否改善校准,见 6.5 的 Good Judgment 项目。

统计只告诉你结果;一张卡写得好不好,要另外评价。过程与结果(process vs outcome)指分开评价两件事:卡写得好不好是过程,结论对不对是结果。两者分开打分,因为单张卡的结论受运气影响很大,好的过程也可能得到坏的结果。

过程分使用第4、5章练习与考核里案例作业的评分表(例如第4章的评分表),满分 10 分。五项各 2 分:已定价与分歧、四个判断、情景与概率、催化剂与时间、失效条件。≥8 分算过程好,与案例作业的通过线相同。打完分,按过程和结果把卡归入四格:

结论成立 结论不成立
过程好(≥8 分) 应得的 多半是运气不好:不改方法,继续记录
过程差(<8 分) 最危险:运气使人以为这样写也可以 应得的:先改进过程

例子:给上面的 12 张卡逐张打过程分(示例数据,非实时)。第 1–12 张依次是 9、8、8、7、6、6、9、10、9、8、8、7 分。以第 6 张为例:XLE 那张卡没有写和市场的分歧,没有基准率,也没有写失效条件,于是已定价与分歧 1 分、四个判断 2 分、情景与概率 1 分、催化剂与时间 2 分、失效条件 0 分,合计 6 分。归入四格:

结论成立 结论不成立
过程好 5 张:1、8、9、10、11 3 张:2、3、7
过程差 2 张:4、6 2 张:5、12

「过程差、结论成立」的第 4、6 张,要和「过程差、结论不成立」的卡一样认真检查。第 6 张的 XLE 确实跑赢了,你很容易因此认为「不查基准率、不写失效条件也可以」,错误的做法就这样被当成了有效的方法。反过来,第 2、3、7 张过程好而结论不成立,单看一张多半是运气不好,不必为此改变方法。12.4 的交易复盘使用同一个思路:是否遵守规则,与盈利还是亏损,分开评价。

统计、基准率、校准图和四格都做完以后,复盘要落到一条改进上:

  1. 找出最大的一个问题,例如上文的校准图里,写 80% 以上的卡只成立了一半。
  2. 一次只改一处,才能知道是哪一处起了作用。改动写成能检查的规则,例如「写 80% 以上之前,先查基准率;基准率不到 70%,就不写 80% 以上」。「以后更谨慎」不是规则,因为复盘时无法判断它有没有被执行。
  3. 写下改动的日期,在观点日志里标出改动前后的卡。
  4. 等改动之后的卡积累到 30 张以上,再与之前的卡比较。比较的方法与比较两个视角相同:算两组之差的标准误;差距不到两倍标准误,就继续记录。
  5. 如果有效,就写进系统草稿第 4 部分「分析规则」(12.7 定稿为规则手册);如果无效,就停用。

改什么,要分两类看。改写卡的做法,例如先查基准率、把窗口对准有固定日期的事件,是把过程补到评分表的要求,不需要统计来证明,十几张卡时就可以改。改对视角的判断,例如「以后不看宏观」或者更相信某一组,就需要差距超出运气范围。

例:宏观 3/8 落后于价格与情绪 7/10,但差距还在运气范围内(上文「样本量」)。所以不据此放弃宏观,而是检查宏观的卡是否更难、基准率是否更低,以及过程分相差多少。如果要改,就改写卡的做法,例如只为有一致预期、能计算意外的数据写卡(4.3)。每组达到 ≥30 张之后再比较。

第7–12章每月复盘一次观点卡。毕业考核也要求每月按这个方法复盘一次,见 12.6 的模拟盘协议第 7 条;12.4 的交易月复盘把这几步作为其中一步,另加交易自己的统计。

每月复盘观点卡,按下面五步过一遍:

  • 统计本月新打分的卡和累计张数。
  • 按视角统计结论的命中率和平均 Brier 分数,按四个判断统计命中率;不到 30 张的视角写「只记录」。
  • 有基准率的卡,算出写基准率时的 Brier 分数,与自己的分数比较。
  • 累计 ≥50 张以后,按写下的概率分档画校准图,看每一档是否超出运气范围。
  • 写一条一次只改一处、能够检查的改进,或者写「本月不改」。

一页复盘(闸门 1 的材料):观点日志达到闸门 1 的张数时(见闸门 1 自查),复盘自己第4–6章的全部观点卡,写一页总结。内容有四项,与闸门 1 自查的那一条一致:

  1. 各视角的命中率和平均 Brier 分数,以及四个判断各自的命中率;不到 30 张的视角写「只记录」。
  2. 与基准率的比较:有基准率的卡,算出写基准率时的 Brier 分数和技能分。
  3. 每张卡的过程分,以及「过程 × 结果」四格各有几张;「过程差、结论成立」的卡,逐张写出缺了什么。
  4. 一条改进:一次只改一处,写成能检查的规则,写明从哪天起执行、再积累多少张以后比较。

复盘改变的是写卡和选结构的规则,不改变张数。

  • 张数只按 7.0 的单笔上限确定。某个视角最近命中得多,或者某张卡写了 90%,都不是加张数的理由(实战要点第 3 条):写下的概率是否可靠,要等校准图来检验。
  • 从第7章起,观点卡和交易联系在一起。交易日志的「分析依据」「观点结果」两栏,可以数出「观点对了却亏钱」和「观点错了却赚钱」各有几笔。原因不止一种,可能是结构没有贴合观点,也可能是止盈、止损先于观点的复查日平了仓,单看一笔分不出,所以在 12.4 的月复盘里累计来数。按分析依据分组,交易也能像观点卡一样按视角统计。

随堂练习(示例数据,非实时):

第一部分。学完第6章时,你有 14 张已打分的卡:

卡 · 视角 概率 成立
1 行业 65% ✓
2 行业 70% ✓
3 行业 60% ✗
4 行业 75% ✓
5 行业 55% ✓
6 宏观 55% ✗
7 宏观 80% ✗
8 宏观 65% ✓
9 宏观 60% ✗
10 价格与情绪 75% ✓
11 价格与情绪 70% ✗
12 价格与情绪 85% ✗
13 公司 70% ✓
14 公司 55% ✓

四个判断:

卡 方向 幅度 时间 波动率
1 ✓ — ✓ —
2 — ✓ ✓ ✓
3 ✓ ✗ ✓ —
4 ✓ — ✓ —
5 — ✓ ✓ —
6 ✗ — ✓ ✗
7 — — ✗ —
8 ✓ ✓ ✓ —
9 ✓ ✗ ✓ —
10 — ✓ ✓ ✓
11 — ✗ ✓ ✗
12 ✓ ✗ ✗ —
13 — ✓ ✓ ✓
14 ✓ — ✓ —
  1. 各视角结论的命中率和平均 Brier 分数各是多少?14 张合计呢?哪几张卡拉低了分数?
  2. 四个判断的命中率各是多少?结论不成立的卡,多半错在哪一项?
  3. 第 10 张的基准率是 60%(过去 20 次中 12 次),第 11 张是 80%(过去 15 次中 12 次)。两张卡写基准率时的 Brier 分数合计是多少?技能分是多少?能下什么结论?

第二部分。按评分表给 14 张卡打过程分,第 1–14 张依次是 9、8、6、9、5、7、8、9、6、8、7、6、9、7 分。

  1. 四格各有几张?复盘时先检查哪几张?

第三部分。一年以后,行业的卡 36 张中成立 26 张,价格与情绪的卡 32 张中成立 14 张;写 70–79%(按 75% 算)的一档有 16 张,成立 9 张。

  1. 行业这一组的命中率、标准误和 ±2 个标准误的下沿各是多少?两组命中率相差多少?差值的标准误是多少?能说明行业的卡对你更准吗?
  2. 70–79% 这一档的运气范围是多少?这一档说明你过度自信吗?

第四部分。

  1. 根据第一、二部分,为下个月写一条改进规则,只写一条,并写明积累多少张以后再比较。
参考解答
  1. 先逐张算 Brier:(0.65 − 1)² = 0.1225,(0.70 − 1)² = 0.09,(0.60 − 0)² = 0.36,(0.75 − 1)² = 0.0625,(0.55 − 1)² = 0.2025,(0.55 − 0)² = 0.3025,(0.80 − 0)² = 0.64,(0.65 − 1)² = 0.1225,(0.60 − 0)² = 0.36,(0.75 − 1)² = 0.0625,(0.70 − 0)² = 0.49,(0.85 − 0)² = 0.7225,(0.70 − 1)² = 0.09,(0.55 − 1)² = 0.2025。

    视角 命中率 平均 Brier
    行业 4/5 = 80% 0.8375 ÷ 5 ≈ 0.17
    宏观 1/4 = 25% 1.425 ÷ 4 ≈ 0.36
    价格与情绪 1/3 ≈ 33% 1.275 ÷ 3 = 0.425
    公司 2/2 = 100% 0.2925 ÷ 2 ≈ 0.15
    合计 8/14 ≈ 57% 3.83 ÷ 14 ≈ 0.27

    拉低分数最多的是两张高概率而不成立的卡:第 12 张(85%,0.7225)和第 7 张(80%,0.64),合计 1.3625,占 14 张合计 3.83 的三分之一以上。价格与情绪的 0.425 主要来自第 12 张,宏观的 0.36 主要来自第 7 张。每组只有 2–5 张,都只记录。

  2. 方向 8 张中对 7 张(87.5%);幅度 9 张中对 5 张(约 56%);时间 14 张中对 12 张(约 86%);波动率 5 张中对 3 张(60%)。结论不成立的 6 张(第 3、6、7、9、11、12 张)里,有 4 张幅度判断错误(第 3、9、11、12 张),其中第 3、9、12 张的方向都是对的。所以结论多半错在幅度:方向看对了,涨跌的幅度却没有达到或者超出了结论写的范围。只看方向的命中率,会高估自己。

  3. 你写的:(0.75 − 1)² + (0.70 − 0)² = 0.0625 + 0.49 = 0.5525。写基准率:(0.60 − 1)² + (0.80 − 0)² = 0.16 + 0.64 = 0.80。技能分 = 1 − 0.5525 ÷ 0.80 ≈ 0.31,大于 0:在这两张卡上,你的分析优于直接写基准率。然而只有两张,结果受偶然因素的影响很大,只记录、不下结论。

  4. 过程好、结论成立:第 1、2、4、8、10、13 张,共 6 张。过程差、结论成立:第 5、14 张,共 2 张。过程好、结论不成立:第 7 张,1 张。过程差、结论不成立:第 3、6、9、11、12 张,共 5 张。先检查第 5、14 张:结论成立了,过程却不到 8 分,最容易让你以为那样写也可以,要逐张写出缺了什么。第 7 张过程好而结论不成立,单看这一张多半是运气,不改方法。

  5. 行业:命中率 26 ÷ 36 ≈ 72.2%;标准误 = √(0.722 × 0.278 ÷ 36) ≈ 0.075,即 7.5 个百分点;下沿 = 72.2% − 2 × 7.5% ≈ 57.3%,高于 50%。价格与情绪:14 ÷ 32 = 43.75%。两组相差约 28.5 个百分点。差值的标准误 = √(0.722 × 0.278 ÷ 36 + 0.4375 × 0.5625 ÷ 32) = √(0.0056 + 0.0077) ≈ 0.115,即 11.5 个百分点;两倍约 23 个百分点。28.5 大于 23,两组也都有 30 张以上,所以可以初步认为行业的卡对你更准。下一步先查两组的基准率和过程分,确认不是价格与情绪的卡问了更难的问题,再决定要不要改变对这两个视角的依赖。

  6. 标准误 = √(0.75 × 0.25 ÷ 16) ≈ 0.108,即 10.8 个百分点。运气范围 = 75% ± 21.7%,即约 53%–97%。实际成立 9 ÷ 16 ≈ 56%,低于写下的 75%,但仍在运气范围内,还不能说明过度自信。写「只记录」,下个月继续看这一档。

  7. 示例:「从(日期)起,每张写了幅度判断的卡,先查同类事件过去 8 次的实际幅度,与这次的隐含幅度或 1σ 比较(5.9),结果写进『基准率』一栏;查不到就不写幅度判断。」理由:结论不成立的 6 张里有 4 张错在幅度,过程差的 5 张也多半缺基准率。这是改写卡的做法,不需要等统计证明。能检查:每张新卡的「基准率」一栏有没有这几个数字,一看便知。在日志里标出改动的日期,等写了幅度判断的新卡积累到 30 张以上,再与改动之前的比较幅度的命中率;差值不到两倍标准误,就继续记录。(也可以选高概率的卡:第 7、12 张写 80% 以上都不成立,就为写 80% 以上的卡定一条规则。只要一次只改一处、能检查、写明何时比较,都可以。)

常见误区:

  • 「这几次都猜对了,说明我的方法有效。」——几次结果说明不了什么:10 张中 7 张时,±2 个标准误的范围是 41%–99%,包含了 50%。
  • 「命中率 70% 就是好分析。」——先问基准率:「SPY 30 天后在 1σ 区间内」按定价就有约 68%,历史上的比例往往更高(9.1)。
  • 「方向的命中率很高,说明我的判断很准。」——结论常常错在幅度或时间:方向对了,跌幅却不到结论写的 1%,结论照样不成立。四个判断要分开统计。
  • 「结论错了的卡就是坏卡。」——过程和结果要分开评价:过程好而结论错误,多半是运气不好,不必改变方法;过程差而结论成立的卡,反而要先检查。
  • 「宏观的卡命中低,以后不看宏观了。」——3/8 与 7/10 的差距不到两倍标准误,还在运气范围内。应当先检查过程和基准率,每组达到 30 张以上再决定。
  • 「发现问题就几处一起改。」——一次改几处,就无法知道是哪一处起了作用。

思考题:

  1. 你写 60–69%(按 65% 算)的一档有 50 张,成立 24 张。这一档的运气范围是多少?能说明你在这一档过度自信吗?(答:标准误 = √(0.65 × 0.35 ÷ 50) ≈ 0.067,即 6.7 个百分点。运气范围 = 65% ± 13.5%,约为 51.5%–78.5%。实际成立 24 ÷ 50 = 48%,低于下沿,运气解释不了:这一档确实过度自信。下一步找出这一档卡的共同点,例如是否都没有从基准率出发,再定一条改进。)
  2. 朋友给你看他的记录:过去 12 次看多 SPY 的判断,对了 9 次。他说自己的方向判断很准。你先问什么?自己能算出什么?(答:先问基准率:同样长度的窗口里,SPY 本来上涨的比例是多少;一直看多的人,命中率也不会低。再算样本:命中率 75%,标准误 = √(0.75 × 0.25 ÷ 12) = 0.125,即 12.5 个百分点,±2 个标准误的范围是 50%–100%。下沿只到 50%,即使不考虑基准率,12 次也说明不了什么。)
  3. 一张卡过程分 5 分,结论成立,Brier 0.09;另一张过程分 9 分,结论不成立,Brier 0.36。复盘时先看哪一张?为什么?(答:先看 5 分那张。它属于「过程差、结论成立」,运气使人以为缺了几项也可以,最容易把错误的做法当成有效的方法。9 分那张过程好而结论不成立,单看一张多半是运气,不必改变方法。)

本节要点:

  1. 按写卡时标好的视角分组,统计结论的命中率和平均 Brier 分数;方向、幅度、时间、波动率各算命中率,因为结论错误时常常只错在其中一项。
  2. 有基准率的卡,逐张算出写基准率时的 Brier 分数作为参照线;技能分小于 0,说明分析不如直接写基准率。
  3. 命中率的标准误 = √(p(1 − p) ÷ n),两组之差的标准误是两个标准误平方和的平方根;±2 个标准误就是运气范围。
  4. 差距没有超出运气范围,或者一组不到 30 张,就写「只记录」,不下结论;同时比较的组越多,越容易碰巧超出,所以事先只指定要比较的两组,或者把门槛提高到三倍标准误。
  5. 校准图每档的运气范围以写下的概率为中心;成立比例落在范围以外,才说明这一档确有偏差。
  6. 过程与结果分开评价,「过程差、结论成立」的卡最危险。
  7. 一次只改一处,写成能检查的规则并注明日期,等改动之后的卡积累到 30 张以上再比较。

本节任务:把观点日志里已打分的卡按视角分组,算出各组的命中率和平均 Brier,为一张有基准率的卡算出写基准率时的 Brier;不到 30 张的视角写「只记录」。日志达到闸门 1 的张数时,按本节写一页复盘(闸门 1 的材料)。

关键术语:

中文 English 释义
命中率 hit rate 判断正确的张数 ÷ 作出这个判断的张数;写「不判断」的不计入
样本量 sample size 用来计算一个比例或平均数的张数或笔数;越少,结论越不可信
标准误 standard error(SE) 比例或平均数随样本偶然变动的幅度;命中率的标准误 = √(p(1 − p) ÷ n),平均数的标准误 = σ ÷ √n
过程与结果 process vs outcome 卡或交易的做法是否正确(过程),与结论和盈亏的好坏(结果),分开打分

课后练习

学完这一节,先独立算下面的题,再展开参考答案核对。做错了就点「收进错题本」,到「复习」页按第 1、3、7 天重做;错因照样记进你自己的错题本。

A7【6.7 复盘 12 张卡】你的 12 张观点卡(示例数据,非实时):宏观 5 张,成立 2 张;公司 4 张,成立 3 张;价格与情绪 3 张,成立 2 张。其中写 80% 的 4 张只成立了 2 张。(1) 各视角的命中率是多少?(2) 公司这一组命中率的标准误和粗略范围(±2 个标准误)是多少?能说明公司分析对你有用吗?(3) 写 80% 的那 4 张,平均 Brier 分数是多少?如果当初都写 50% 呢?(4) 下个月只改一处,你会改什么?

参考答案
  1. 宏观 2/5 = 40%;公司 3/4 = 75%;价格与情绪 2/3 ≈ 67%。

  2. 标准误 = √(0.75 × 0.25 ÷ 4) ≈ 0.217,范围约 75% ± 43%,即约 32%–100%(上限封顶在 100%)。下沿远低于 50%,所以 4 张卡说明不了什么,只记录、不下结论。

  3. 成立的 2 张各得 (0.8 − 1)² = 0.04,不成立的 2 张各得 (0.8 − 0)² = 0.64;平均 = (0.08 + 1.28) ÷ 4 = 0.34。如果都写 50%,每张都是 0.25,平均也是 0.25。写 80% 的分数反而更差,说明这几张过度自信;但样本还小,先当作提醒。

  4. 例如:「写 80% 以上之前,先查基准率;基准率不到 70%,就不写 80% 以上。」写下改动的日期,等改动之后的卡积累到 30 张以上,再比较改动前后的结果。如果有效,就写进规则手册(12.7 的分析规则);如果无效,就停用。

换一组数字再练

题目参数每次随机生成,答完点「检查」即时判对错。价格是示例、不是实时行情;答数量时按提示的单位填写,亏损或下跌填负数。

需要启用 JavaScript 才能自动出题。

问 AI 导师

卡住了,或者想换个角度再学一遍?把下面这段提示词交给 Claude 或其他 AI 助手,它会按本课程的教学规则一对一带你学这一节。提示词可以先改再复制。

AI 也会算错:它给的数字请自己复算,拿不准时以正文和答案页为准。

仅供学习,不构成投资建议。课程里的价格和数据都是标注过的示例,不是实时行情。