602 / 691SURV

Survivorship Bias

生存者バイアス

Survivorship Bias は、元の集団を評価するとき、後に利用可能なデータから消えた単位を見落とすことで生じます。現在の勝者や存続中のファンドの歴史は、当時適格だった全参加者の歴史とは別の問いに答えている場合があります。重要なのは選択ルール、時点ごとの所属、消滅したポジションの清算処理です。

Survivorship Bias は、生存した、または引き続き観測できる単位を選び、その結果をより広い元の母集団の結果として示すことによる偏りです。明確に定義した現在の集団を単に記述すること自体は、自動的に誤りとなるわけではありません。

QuantConnect は Survivorship Bias を、期間末まで存続した証券だけでテストし、上場廃止された銘柄を除く場合として説明しています。私たちの確認は元の集合から始めます。組入れ時点で条件を満たした単位はどれでしょうか。現在の一覧は当時の構成の証明ではありません。参加基準は結果より先に記述し、後に消えた単位にも適用しなければなりません。そうしなければ、計算した平均が答える問いそのものが変わります。 [QuantConnect — Research Guide: Survivorship Bias]

QuantConnect は、現在の指数構成銘柄を過去に遡って使うことを Look-ahead Bias と明示的に結び付けています。当時の意思決定では現在の構成を知り得なかったためです。そこで私たちの監査は、集合への加入と脱退の時系列履歴と、その発効ルールを保存します。現在の構成銘柄の過去の価格だけでは不十分です。動的な選択では、判断に関わる各時点で当時利用できた一覧を復元する必要があります。構成が自動で変化するだけではデータの正確さは証明されません。 [QuantConnect — Research Guide: Survivorship Bias]

Morningstar によると、CRSP Survivor-Bias-Free US Mutual Fund Database は、すでに非活動となったファンドの情報も保存します。私たちの方法上の帰結は、元の集団の評価を現在利用できるファンドの一覧に置き換えてはいけないということです。ファンドかそのシェアクラスかなど、分析単位を明示し、同じエクスポージャーを意図せず重複計上しないようにします。目的が現在の品ぞろえの記述だけなら、狭い集合が適切な場合もありますが、そのリターンを元の集団全体の結果として示してはいけません。 [Morningstar — CRSP Survivor-Bias-Free US Mutual Fund Database]

Morningstar は CRSP 株式データベースについて、活動中・非活動の証券と、その履歴を追跡する恒久的な識別子を挙げています。そこで私たちの実装ルールは、金融商品の同一性と表示名を分離します。名称変更で偽の新たな始まりを作ってはならず、データ結合で異なる商品を誤ってつなげてもいけません。イベント、日付、記録の出所との関係を保持します。現在のティッカーが一致するだけでは、長期の歴史的系列のキーとして不十分です。 [Morningstar — CRSP US Stock Databases]

LEAN の文書は、上場廃止イベントとその処理を通常の価格データとは別に説明しています。私たちの会計上の確認では、保有ポジション、現金、その後にあり得る清算がどうなったかの証拠を求めます。価格の欠損は、確認されたゼロでも、最後に利用できた価格での約定確認でもありません。未知の最終結果は未知と明記し、その影響やシナリオを説明します。他より履歴が早く終わるというだけで単位全体を削除してはいけません。 [QuantConnect — US Equity Corporate Actions]

QuantConnect はファンダメンタル株式ユニバースに上場廃止銘柄が含まれる一方、一部のカテゴリーは除外され、個々の項目には欠損値があると記しています。私たちの結論は、データベースの名称だけでは後続のフィルターや表の結合を検証できないということです。監査では、除外した記録の件数、理由、フィルター適用時点を記録します。欠損値の補完や除外によって、課題が約束した母集団をひそかに別のものに変えてはいけません。 [QuantConnect — Fundamental Universes]

S&P Dow Jones Indices は、遡及計算した結果に生存者・先読みバイアスが含まれる可能性があり、実際の取引ではないと注意を促しています。以下の私たちの架空の例は、各単位の結果を同じに保ったまま選択の変化だけを取り出しています。市場での典型的な誤差の大きさは示しません。別の集合では成功した単位が抜けることもあるため、差の方向は事前に保証できません。重み、期間、資金フローの扱いを明記する必要があり、単純平均と実際のポートフォリオのリターンは自動的に同じものではありません。 [S&P Dow Jones Indices — Performance Disclosure]

S&P Dow Jones Indices は、指数の開始前の仮想的な履歴と開始後の実績を区別し、構成変更の方法を参照するよう求めています。そこで私たちの最終記録には、元の母集団、参加ルール、除外した単位、最終値の出所、再計算した結果を保存します。修正版の報告は誤った報告に置き換えなければなりません。Survivorship Bias を除いても、他の Look-ahead Bias、Overfitting、取引費用、約定の可能性をそれだけで解決できるわけではありません。より完全な履歴であっても将来のリターンの約束ではありません。 [S&P Dow Jones Indices — Performance Disclosure]

例例 · SURV

同じ結果でも、選ぶ集団が異なります

私たちの架空のモデルは、同時に存在する四つの単位 A、B、C、D を同じ期間にわたって追跡します。すべて期間の初めに適格で、各単位は 100 USD から始まり、負債、レバレッジ、外部資金の流出入はありません。清算を含めて確認された最終価値は [120, 110, 80, 60] USD で、費用があればすでにこれらの値に含まれます。単純リターンは [20, 10, -20, -40] % です。現在の一覧には A と B だけがあり、生存フラグは [1, 1, 0, 0] です。C と D は一覧から消えていますが、モデルでは最終価値が分かっており、ゼロに置き換えません。元の集団全体の初期価値は 400 USD、最終価値は 370 USD で、損益は -30 USD、リターンは -7.5 % です。ここでは初期投入額が等しいため、このリターンは四つのリターンの単純平均と一致します。事後的に選んだ A と B の集団は初期価値が 200 USD、最終価値が 230 USD で、損益は 30 USD、リターンは 15 % です。差は 22.5 パーセントポイントであり、一方のリターンに対する他方の増加率ではありません。図は各単位のリターンを示し、現在の一覧に含まれるものを区別します。これは時系列でも、四回の繰り返し取引でもありません。選んだ二つは、将来の生存を当時すでに知っていたことに基づく実行可能なルールではありません。この例はファンドや Bitcoin の過去の実績ではなく、別の集合での偏りの大きさや方向を決めるものでもありません。

理解を深めるには、この項目とあわせて次もお読みください Backtesting, Overfitting, Walk-forward Analysis, Look-ahead Bias, Paper Trading. 次の項目からも参照されています Look-ahead Bias.

01現在活動中のファンド一覧は常に誤りですか?

いいえ。現在の提供状況を正しく記述することはできます。後で消えたファンドも含む元の集団全体の経験として、その一覧の歴史を示すと誤りになります。問いと選択ルール次第です。

02欠落した単位を全損として扱えば十分ですか?

いいえ。一覧からの除外や価格の欠損だけでは全損を証明できません。実際またはモデル上の清算を裏付け、未知の値を認め、黙って除外したりゼロにしたりする代わりに仮定を説明する必要があります。

DOC · 001QuantConnect — Research Guide: Survivorship Bias文書 ↗DOC · 002Morningstar — CRSP Survivor-Bias-Free US Mutual Fund Database文書 ↗DOC · 003Morningstar — CRSP US Stock Databases文書 ↗DOC · 004QuantConnect — US Equity Corporate Actions文書 ↗DOC · 005QuantConnect — Fundamental Universes文書 ↗DOC · 006S&P Dow Jones Indices — Performance Disclosure文書 ↗
一次資料を優先 · 投資助言ではありません