Survivorship Bias

QuantConnect popisuje Survivorship Bias při testu omezeném na cenné papíry, které přežily do konce období, s vynecháním vyřazených titulů. Naše kontrola začíná původním souborem: které jednotky splňovaly podmínky v okamžiku zařazení? Dnešní seznam není důkazem tehdejšího složení. Kritérium účasti musí být popsáno dříve než výsledek a musí platit i pro později zmizelé jednotky. Jinak se mění otázka, na kterou vypočtený průměr odpovídá. [1]

QuantConnect výslovně spojuje zpětné použití dnešních členů indexu s Look-ahead Bias: tehdejší rozhodnutí by dnešní složení neznalo. Vlastní audit proto uchovává časovou historii vstupů a výstupů ze souboru i pravidlo jejich účinnosti. Samotné historické ceny současných členů nestačí. U dynamického výběru je nutné pro každý rozhodný okamžik obnovit právě tehdy dostupný seznam; automatická změna členství sama správnost dat nedokazuje. [1]

Databáze CRSP Survivor-Bias-Free US Mutual Fund uchovává podle Morningstar informace také o již neaktivních fondech. Náš metodický důsledek: hodnocení původní skupiny nelze nahradit přehledem dnes dostupných fondů. Je třeba uvést jednotku analýzy, například fond nebo jeho třídu, a zabránit nechtěnému vícenásobnému započítání téže expozice. Pokud je cílem pouze popis dnešní nabídky, takový užší soubor může být přiměřený, ale nesmí vydávat svůj výnos za výsledek celé původní skupiny. [2]

Morningstar uvádí u akciových databází CRSP aktivní i neaktivní cenné papíry a trvalé identifikátory pro sledování jejich historie. Naše implementační pravidlo proto odděluje identitu nástroje od zobrazovaného názvu. Přejmenování nesmí vytvořit falešný nový začátek a spojení dat nesmí omylem slepit odlišné nástroje. Uchovávejte vazby na události, datum a původ záznamu. Pouhá shoda dnešního tickeru není dostatečným klíčem pro dlouhou historickou řadu. [3]

Dokumentace LEAN popisuje události vyřazení a jejich obsluhu odděleně od běžných cenových dat. Naše účetní kontrola vyžaduje doložit, co se stalo s drženou pozicí, hotovostí a případným následným vypořádáním. Chybějící cena není doložená nula ani potvrzené provedení za poslední dostupnou cenu. Neznámý konečný výsledek označte jako neznámý a popište jeho dopad či scénáře; neodstraňujte celou jednotku jen proto, že její historie končí před ostatními. [4]

QuantConnect u fundamentálního akciového souboru uvádí zahrnutí vyřazených titulů, ale zároveň vyloučení některých kategorií a chybějící hodnoty jednotlivých polí. Náš závěr: označení databáze samo neověřuje následné filtry a spojování tabulek. Audit má evidovat počet vyřazených záznamů, důvod a čas použití filtru. Doplnění chybějících údajů ani jejich odfiltrování nesmí potichu vytvořit jinou populaci, než jakou zadání slibuje. [5]

S&P Dow Jones Indices upozorňuje, že zpětně vypočtené výsledky mohou obsahovat survivor nebo look-ahead bias a nejsou skutečným obchodováním. Vlastní smyšlený příklad níže izoluje změnu výběru při stejných výsledcích jednotlivých jednotek. Neukazuje typickou velikost chyby na trhu. V jiném souboru mohou vypadnout i úspěšné jednotky, takže směr rozdílu nelze předem zaručit. Je nutné uvést váhy, období a zacházení s peněžními toky; prostý průměr a výnos skutečného portfolia nejsou automaticky zaměnitelné. [6]

S&P Dow Jones Indices rozlišuje hypotetickou historii před spuštěním indexu od živých výsledků a odkazuje na metodiku změn jeho složení. Náš závěrečný protokol proto ukládá původní populaci, pravidla účasti, vyřazené jednotky, zdroj koncových hodnot a přepočtený výsledek. Opravený report musí nahradit chybný. Odstranění Survivorship Bias neřeší samo další Look-ahead Bias, Overfitting, transakční náklady ani dostupnost plnění. Ani úplnější historie není příslibem budoucího výnosu. [6]