2025-11-15T08:13:11.214644

Most claimed statistical findings in cross-sectional return predictability are likely true

Chen

The false discovery rate (FDR) measures the share of false positives in a set of statistical tests. I develop simple and intuitive bounds on the FDR in cross-sectional predictability publications. The simplest bound requires just a few lines of math and finds $\text{FDR} \le 25\%$ based on summary statistics in eight out of nine previous studies. A more refined bound finds $\text{FDR} \le 9\%$. The FDR is small because randomly selecting accounting ratios produces statistically significant predictability far more often than would occur if there were no predictability. The bounds also reconcile the disparate FDR estimates in the literature.

academic

横断面リターン予測可能性における主張された統計的発見のほとんどは真実である可能性が高い

基本情報

論文ID: 2206.15365
タイトル: Most claimed statistical findings in cross-sectional return predictability are likely true
著者: Andrew Y. Chen (連邦準備制度理事会)
分類: q-fin.GN (定量金融 - 一般金融)
発表時期: 2025年10月 (SSRN初版公開: 2021年8月27日)
論文リンク: https://arxiv.org/abs/2206.15365

要旨

虚偽発見率(FDR)は統計検定における偽陽性の割合を測定する。本論文は横断面予測可能性研究のための簡潔で直感的なFDR上界を開発した。最も簡潔な上界は数行の数学計算のみを必要とし、先行研究9件中8件の要約統計量に基づいて、FDR ≤ 25%を発見した。より精密な上界ではFDR ≤ 9%を発見した。FDRが小さい理由は、ランダムに選択された会計比率が統計的に有意な予測可能性を生み出す頻度が、予測可能性がない場合の期待頻度をはるかに上回るためである。これらの上界はまた、文献における異なるFDR推定値間の相違を調停した。

研究背景と動機

問題背景

研究者は数百の横断面株式リターン予測因子を発見しており、この豊富さは多重検定問題に対する懸念を引き起こしている。直感的には、研究者が多くの検定を実施する場合、予測可能性がないという帰無仮説の下でも、純粋に偶然により、いくつかの検定は統計的に有意になる可能性がある。

核心的問題

多重検定問題: 多数の因子発見は偽陽性結果をもたらす可能性がある
FDR推定値の相違: 既存文献におけるFDR推定値は0%近くから45%を超えるまで大きく異なる
出版バイアス: 統計的に有意な結果はより出版されやすく、真のFDR推定値に影響を与える
方法論上の論争: 異なる研究チームが異なる方法を使用して全く異なる結論に至っている

研究の重要性

FDRの正確な推定は、金融異象文献の信頼性を理解するために重要であり、投資戦略の策定と学術研究の方向性に直接影響を与える。

核心的貢献

簡潔で直感的なFDR上界: 数行の数学計算のみでFDR上界を推定できる「Easy Bound」方法を提案
視覚的上界方法: ヒストグラム分解を通じてより厳密なFDR上界を提供する「Visual Bound」を開発
文献の調停: 既存文献における大きく異なるFDR推定値を統一的に説明し、相違は主にデータの相違ではなく解釈の相違に由来することを発見
実証的発見: ランダムに選択された会計比率が有意な予測可能性を生み出す確率が理論的期待をはるかに上回ることを証明し、小さいFDRに対する経験的支持を提供

方法の詳細説明

タスク定義

横断面シグナルiの予測力を $\bar{r}_i$ で測定し、通常はiに基づいてロング・ショート・ポートフォリオを構築し、サンプル平均リターンを計算することで得られる。帰無仮説は $E(\bar{r}_i) = 0$ である。

核心的フレームワーク

1. 基本設定

$t_i \equiv \bar{r}_i / SE_i$ はt統計量
帰無仮説の下: $t_i | null_i \sim Normal(0,1)$
発見の定義: $|t_i| > 2$ (5%有意水準に対応)
FDRの定義: $FDR_{|t|>2} \equiv Pr(null_i | |t_i| > 2)$

2. Easy Bound方法

ベイズの定理を適用して以下を得る: $FDR_{|t|>2} = \frac{Pr(|t_i| > 2|null_i) Pr(null_i)}{Pr(|t_i| > 2)} \leq \frac{5\%}{Pr(|t_i| > 2)}$

この上界は直感的で理解しやすい: 帰無仮説の下での裾部確率(分子)が実際に観察された裾部確率(分母)を説明できない場合、FDRは必ず小さくなければならない。

3. Visual Bound方法

データを使用して $Pr(null_i)$ を推定することで上界を厳密にする: $Pr(|t_i| < 0.5) \geq (0.38)Pr(null_i)$

組み合わせてより厳密な上界を得る: $FDR_{|t|>2} \leq \left[\frac{5\%}{Pr(|t_i| > 2)}\right]\left[\frac{Pr(|t_i| < 0.5)}{0.38}\right]$

技術的革新点

1. 出版バイアスへの対処

データマイニング研究を最悪ケースシナリオとして使用
保守的な外挿法を通じて未発表結果の分布を推定
発表文献の統計量への直接的な依存を回避

2. ヒストグラム分解方法

t統計量ヒストグラムを帰無分量と対立分量に分解: $Pr(|t_i| \in b) = Pr(|t_i| \in b | null_i)Pr(null_i) + Pr(|t_i| \in b | alt_i)Pr(alt_i)$

帰無分量がデータ分量を超えないという制約を通じてFDR上界を推定。

3. アルゴリズム1: 視覚的上界推定

データマイニングシグナルの $|t_i|$ ヒストグラムをプロット
データ内部に適合できる最大帰無分布ヒストグラムをプロット
2.0で垂直線を引き、右側の帰無面積とデータ面積の比がFDR上界を推定

実験設定

データセット

データマイニング研究:
- Yan and Zheng (2017): 18,000個の会計比率
- Chordia, Goyal, and Saretto (2020): 約200個の会計変数
- Chen, Lopez-Lira, and Zimmermann (2025): 29,000個のシグナル
メタ研究データ:
- Green, Hand, Zhang (2013)
- Chen, Zimmermann (2020): 77個の発表済み予測因子
- Harvey, Liu, Zhu (2016)
- McLean, Pontiff (2016)
- Jensen, Kelly, Pedersen (2021)
- Jacobs, Muller (2020)