598 / 736WFA

Walk-forward Analysis

समय में क्रमिक आगे बढ़ने वाला विश्लेषण

Walk-forward Analysis समय के साथ बदलती रणनीति जाँचता है: ज्ञात डेटा से नियम चुनता है, अगले दौर में उसका परिणाम देखता है और फिर आगे बढ़कर प्रक्रिया दोहराता है।

Walk-forward Analysis चयन की प्रक्रिया को समय के क्रम में जाँचता है। उपलब्ध अतीत से नियम चुने या समायोजित किए जाते हैं, फिर बाद के उन आँकड़ों पर परखे जाते हैं जो उस चयन में इस्तेमाल नहीं हुए थे।

पीटर के पास ट्रेडिंग नियम के कई विकल्प हैं। वह हाल के अतीत में सबसे अच्छा चला विकल्प इस्तेमाल करना चाहता है। Walk-forward Analysis इस विचार को क्रम से दोहराता है: ज्ञात इतिहास से चुनना, अगली अवधि का परिणाम लिखना और फिर चुनना। QuantConnect ऐसे नियमित समायोजन का वर्णन करता है। इसलिए जाँच केवल किसी स्थिर विकल्प की नहीं, चुनने के तरीके की भी है। उम्मीदवार, कसौटी और अगली समीक्षा का समय पहले तय होने चाहिए। [1]

यदि पीटर ने पिछले लाभ के कारण कोई विकल्प चुना, तो वही लाभ उसके चुनाव को स्वतंत्र रूप से सही नहीं ठहराता। QuantConnect बताता है कि वह डेटा अब विकास का हिस्सा है। उचित सवाल है: चुनने के बाद विकल्प ने कैसा किया? वर्तमान परीक्षण अपना विजेता खुद नहीं चुन सकता। अवधि खत्म होने और परिणाम उपलब्ध होने के बाद पूर्वनिर्धारित प्रक्रिया उसे अगले चुनाव में इस्तेमाल कर सकती है। इससे पहले दर्ज निर्णय दोबारा नहीं लिखा जाता। [2]

चयन विंडो इतिहास का वह हिस्सा है जो अभी इस्तेमाल हो रहा है। खिसकती विंडो लंबाई स्थिर रखती है और पुराने डेटा छोड़ती जाती है; फैलती विंडो शुरुआती बिंदु रखकर नए अवलोकन जोड़ती है। scikit-learn का TimeSeriesSplit सामान्यतः प्रशिक्षण हिस्सा बढ़ाता है, लेकिन उसका आकार सीमित किया जा सकता है। लंबाई और अपडेट की आवृत्ति परीक्षण से पहले चुनें। दस्तावेज़ तुलनीय मापों के लिए समान अंतराल वाले अवलोकन माँगते हैं; अनियमित रिकॉर्ड में वास्तविक कैलेंडर अवधि भी जाँचें। [3]

मान लें अंतिम प्रशिक्षण अवलोकन का परिणाम अगले परीक्षण के दौरान जाकर पूरा होगा। चुनाव के समय वह अभी ज्ञात नहीं है। तालिका को समयक्रम में रखना इसे ठीक नहीं करता। TimeSeriesSplit का gap पैरामीटर प्रशिक्षण के अंत से कुछ अवलोकन हटाने देता है। आवश्यक अंतराल इनपुट उपलब्ध होने और परिणाम पूरा होने के समय से तय होना चाहिए, सबसे सुंदर रेखा से नहीं। उचित अंतराल भी पड़ोसी अवधियों की स्वतंत्रता साबित नहीं करता और सभी पक्षपात नहीं मिटाता। [3]

रिसाव सीधे ट्रेडिंग नियम में होना ज़रूरी नहीं। मानों का पैमाना बदलने वाला औसत पूरे डेटा से निकाला गया हो सकता है, जिसमें भविष्य का परीक्षण भी शामिल है। scikit-learn गायब मान भरने और इनपुट विशेषताएँ चुनने में भी यही खतरा बताता है। ऐसे रूपांतरणों की सेटिंग केवल प्रशिक्षण डेटा से सीखें और फिर परीक्षण पर लागू करें। हर कदम पर अलगाव दोहराएँ; पहले से बदली तालिका को बाद में बाँटने से रिसाव नहीं मिटता। डेटा का संस्करण और उपलब्धता का समय भी बचाकर रखें। [4]

अलग-अलग अवधि जाँचने के बाद परिणाम सही ढंग से जोड़ने पड़ते हैं। QuantConnect निष्पादन भाव और मात्रा के मॉडल समझाता है, जिनमें स्प्रेड और Slippage शामिल हो सकते हैं। फिर हमारे मूल्यांकन को सुसंगत लेखा चाहिए: विकास के लाभ परीक्षण खाते में न जोड़ें और मिलती-जुलती परीक्षण अवधियों को बिना समझाए कई बार न गिनें। विकल्प बदलते समय खुली पोज़िशन, पूँजी और बदलाव की लागत का हिसाब बताएँ। नीचे का उदाहरण हर अवधि के अंत में पोज़िशन बंद करके इसे सरल बनाता है। [5]

पीटर सुंदर परीक्षण परिणाम मिलने तक विंडो की लंबाई, उद्देश्य या उम्मीदवार बदल सकता है। तब उसने परीक्षण श्रृंखला भी विकास में इस्तेमाल कर ली। Bailey और सहलेखक एक ही डेटा पर बार-बार खोजने से मिलने वाली संयोगपूर्ण सफलताओं का अध्ययन करते हैं। सभी आज़माई प्रक्रियाएँ दर्ज करें और अब तक अप्रयुक्त इतिहास पर किसी अतिरिक्त जाँच को अलग दिखाएँ। समय में आगे बढ़ना अपने आप सांख्यिकीय गारंटी या पुराने डेटा से अत्यधिक मेल बैठाने की संभावना का अनुमान नहीं है। [6]

विंडो की सीमाएँ, उम्मीदवार, चयन अंक, वास्तविक चुनाव और अगली अवधि के लागत के बाद के परिणाम सुरक्षित रखें। कुल परिणाम के साथ घाटा, अवलोकनों की संख्या और समान शर्तों पर तुलना दें। अमेरिकी NFA याद दिलाता है कि काल्पनिक नतीजे वास्तविक नुकसान के समय तरलता, स्लिपेज और व्यवहार की हर समस्या नहीं दिखाते; उसके प्रचार नियम निर्धारित सदस्यों पर लागू हैं। छोटा घाटे वाला उदाहरण पूरी विधि को गलत नहीं साबित करता। वैसे ही सकारात्मक योग भविष्य की बढ़त का प्रमाण नहीं है। [7]

उदाहरणउदाहरण · WFA

पिछला विजेता अगली बार हार सकता है

अपना बनाया काल्पनिक उदाहरण लें: समान लंबाई की छह अवधियाँ 1 से 6 और पहले से तय विकल्प A तथा B। समान स्थिर सौदा आकार पर उनके शुद्ध परिणाम A ⁦[4, -1, 2, -3, 5, -2] USD⁩ और B ⁦[1, 2, 1, 1, -2, 4] USD⁩ हैं। हर परिणाम केवल अवधि पूरी होने के बाद उपलब्ध होता है, सभी मॉडल लागत शामिल करता है और कोई खुली पोज़िशन नहीं छोड़ता। बदलाव की अतिरिक्त लागत, कर्ज, जमा या निकासी नहीं है। परीक्षण से पहले प्रक्रिया तय करते हैं: पिछली तीन पूरी अवधियों का योग लें, बड़ा योग चुनें और विजेता को केवल अगली अवधि में इस्तेमाल करें; बराबरी पर A चुनें। चयन विंडो ⁦[1, 2, 3]⁩, ⁦[2, 3, 4]⁩ और ⁦[3, 4, 5]⁩ हैं, जिनके बाद परीक्षण ⁦[4, 5, 6]⁩ हैं। A के चयन योग ⁦[5, -2, 4] USD⁩ और B के ⁦[4, 4, 0] USD⁩ हैं। इसलिए क्रम से A, B और A चुने जाते हैं। संयुक्त परीक्षण परिणाम में केवल ⁦[-3, -2, -2] USD⁩ आते हैं, कुल ⁦-7 USD⁩। परीक्षण खाता अवधि 4 से पहले ⁦1000 USD⁩ नकद से शुरू होकर ⁦993 USD⁩ पर समाप्त होता है; खाते की राशि के साथ सौदों का आकार नहीं बदलता। चयन अवधियों के लाभ खाते में नहीं जोड़े जाते और हर परीक्षण केवल एक बार गिना जाता है। चित्र चयन विंडो और बाद के परीक्षणों का आगे खिसकना दिखाता है, वास्तविक बाज़ार इतिहास या भविष्य की सफलता की संभावना नहीं।

पूरी तस्वीर के लिए इस प्रविष्टि के साथ यह भी पढ़ें Backtesting, Overfitting, Look-ahead Bias, Trading Plan, Trading Journal. इस प्रविष्टि का उल्लेख यहाँ भी है Backtesting, Overfitting, Look-ahead Bias, Survivorship Bias.

01क्या पुराना परीक्षण बाद में चयन के लिए इस्तेमाल हो सकता है?

हाँ, जब अवधि समाप्त हो चुकी हो, आवश्यक जानकारी उपलब्ध हो और पूर्वनिर्धारित प्रक्रिया इसकी अनुमति देती हो। लेकिन उस पुराने परीक्षण के लिए दर्ज विकल्प या परिणाम को पीछे जाकर बदलना नहीं चाहिए।

02क्या Walk-forward Analysis ओवरफिटिंग रोकता है?

अपने आप नहीं। विंडो, उम्मीदवार या पूरी प्रक्रिया को उन्हीं नतीजों पर बार-बार ढाला जा सकता है। प्रयासों का इतिहास लिखें, सूचना रिसाव जाँचें और आगे के विकास को सचमुच नए सत्यापन से अलग रखें।

DOC · 001QuantConnect — Walk Forward Optimizationदस्तावेज़ DOC · 002QuantConnect — Optimization Parametersदस्तावेज़ DOC · 003scikit-learn — TimeSeriesSplitदस्तावेज़ DOC · 004scikit-learn — Common Pitfalls: Data Leakageदस्तावेज़ DOC · 005QuantConnect — Trade Fills: Key Conceptsदस्तावेज़ DOC · 006Bailey et al. — The Probability of Backtest Overfittingप्राथमिक स्रोत DOC · 007NFA — Use of Promotional Material Containing Hypothetical Performance Resultsदस्तावेज़
समीक्षा की गई: स्रोत पहले · यह निवेश सलाह नहीं है