Survivorship Bias est un biais dû à la sélection des unités survivantes ou encore observées lorsque leurs résultats sont présentés comme ceux de la population initiale plus large. Décrire simplement un groupe actuel clairement délimité n’est pas automatiquement une erreur.
QuantConnect décrit Survivorship Bias dans un test limité aux titres ayant survécu jusqu’à la fin de la période et omettant les titres radiés. Notre contrôle commence par l’ensemble initial : quelles unités remplissaient les conditions lors de leur inclusion ? La liste actuelle ne prouve pas la composition d’alors. Le critère de participation doit être décrit avant le résultat et s’appliquer aussi aux unités disparues plus tard. Sinon, la question à laquelle répond la moyenne calculée change. [QuantConnect — Research Guide: Survivorship Bias]
QuantConnect relie explicitement l’utilisation rétrospective des membres actuels d’un indice à Look-ahead Bias : une décision de l’époque n’aurait pas connu la composition actuelle. Notre audit conserve donc l’historique des entrées et sorties de l’ensemble ainsi que leur règle de prise d’effet. Les seuls prix historiques des membres actuels ne suffisent pas. En sélection dynamique, il faut reconstituer pour chaque instant pertinent la liste alors disponible ; une modification automatique de l’appartenance ne prouve pas à elle seule la justesse des données. [QuantConnect — Research Guide: Survivorship Bias]
Selon Morningstar, la CRSP Survivor-Bias-Free US Mutual Fund Database conserve aussi des informations sur les fonds devenus inactifs. Notre conséquence méthodologique : on ne peut pas remplacer l’évaluation du groupe initial par un panorama des fonds aujourd’hui disponibles. Il faut préciser l’unité d’analyse, par exemple le fonds ou sa classe de parts, et éviter de compter involontairement plusieurs fois la même exposition. Si l’objectif est uniquement de décrire l’offre actuelle, cet ensemble plus étroit peut convenir, mais son rendement ne doit pas être présenté comme le résultat de tout le groupe initial. [Morningstar — CRSP Survivor-Bias-Free US Mutual Fund Database]
Morningstar indique que les bases d’actions CRSP comprennent des titres actifs et inactifs et des identifiants permanents pour suivre leur histoire. Notre règle d’implémentation sépare donc l’identité de l’instrument de son nom affiché. Un changement de nom ne doit pas créer un faux nouveau départ, et une jointure de données ne doit pas fusionner par erreur des instruments différents. Conservez les liens avec les événements, la date et l’origine de l’enregistrement. La simple égalité du symbole actuel ne constitue pas une clé suffisante pour une longue série historique. [Morningstar — CRSP US Stock Databases]
La documentation LEAN décrit les événements de radiation et leur traitement séparément des données de prix ordinaires. Notre contrôle comptable exige de documenter le devenir de la position détenue, de la trésorerie et d’un éventuel règlement ultérieur. Un prix manquant n’est ni un zéro établi ni une exécution confirmée au dernier prix disponible. Signalez un résultat final inconnu comme inconnu et décrivez son impact ou les scénarios ; ne supprimez pas toute l’unité simplement parce que son historique se termine avant les autres. [QuantConnect — US Equity Corporate Actions]
QuantConnect indique que son univers fondamental d’actions inclut des titres radiés, tout en excluant certaines catégories et en présentant des valeurs manquantes dans certains champs. Notre conclusion : l’étiquette de la base ne valide pas à elle seule les filtres et jointures ultérieurs. L’audit doit consigner le nombre d’enregistrements exclus, la raison et le moment d’application du filtre. Compléter ou filtrer les données manquantes ne doit pas créer discrètement une population différente de celle promise par l’étude. [QuantConnect — Fundamental Universes]
S&P Dow Jones Indices avertit que les résultats rétrospectifs peuvent contenir un biais de survivants ou d’anticipation et ne correspondent pas à une négociation réelle. Notre exemple fictif ci-dessous isole le changement de sélection en gardant les résultats individuels identiques. Il ne montre pas l’ampleur typique de l’erreur sur le marché. Dans un autre ensemble, des unités performantes peuvent également disparaître ; le sens de l’écart ne peut donc pas être garanti à l’avance. Il faut préciser les pondérations, la période et le traitement des flux financiers ; une moyenne simple et le rendement d’un portefeuille réel ne sont pas automatiquement interchangeables. [S&P Dow Jones Indices — Performance Disclosure]
S&P Dow Jones Indices distingue l’historique hypothétique avant le lancement d’un indice des résultats en direct et renvoie à la méthode de modification de sa composition. Notre protocole final conserve donc la population initiale, les règles de participation, les unités exclues, la source des valeurs finales et le résultat recalculé. Le rapport corrigé doit remplacer le rapport erroné. Supprimer Survivorship Bias ne résout pas à lui seul les autres Look-ahead Bias, Overfitting, coûts de transaction ou possibilités d’exécution. Même un historique plus complet ne promet pas de rendement futur. [S&P Dow Jones Indices — Performance Disclosure]
Mêmes résultats, groupe sélectionné différent
Pour une vision complète, lisez aussi Backtesting, Overfitting, Walk-forward Analysis, Look-ahead Bias, Paper Trading. Cette entrée est également citée par Look-ahead Bias.
01Une liste de fonds actuellement actifs est-elle toujours erronée ?+
Non. Elle peut décrire correctement l’offre actuelle. L’erreur consiste à présenter son historique comme l’expérience de tout le groupe initial, y compris les fonds disparus plus tard. Tout dépend de la question et de la règle de sélection.
02Suffit-il d’attribuer une perte totale aux unités manquantes ?+
Non. Ni la disparition de la liste ni un prix manquant ne prouvent à eux seuls une perte totale. Il faut établir le règlement réel ou modélisé, reconnaître les valeurs inconnues et décrire les hypothèses, au lieu d’omettre discrètement ou de remplacer par zéro.