होल्डआउट टेस्ट (विज्ञापन): परिभाषा और उपयोग

होल्डआउट टेस्ट एक प्रयोग डिज़ाइन है जो आपके दर्शकों के एक हिस्से, यानी होल्डआउट समूह से किसी विज्ञापन या मार्केटिंग उपचार को वापस लेता है, जबकि दर्शकों का बाकी हिस्सा इसे प्राप्त करना जारी रखता है, और फिर उपचार के वास्तविक प्रभाव को मापने के लिए दोनों समूहों के बीच परिणामों की तुलना करता है। यह विज्ञापन में उपयोग किए जाने वाले कारणात्मक-माप प्रयोगों के व्यापक परिवार के लिए एक छत्र शब्द है, जिसमें पूर्ण क्षेत्रीय विराम से लेकर एक संकीर्ण फ्रीक्वेंसी-कैप टेस्ट तक सब कुछ शामिल है।

बुनियादी कार्यप्रणाली#

अपने दर्शकों को दो समूहों में विभाजित करें जो आपके परिणाम मीट्रिक की भविष्यवाणी करने वाले लक्षणों पर यथासंभव समान हों: पिछली खरीद व्यवहार, क्षेत्र, डिवाइस प्रकार, जो भी आपके व्यवसाय के लिए मायने रखता हो। एक समूह, होल्डआउट, कोई विज्ञापन नहीं देखता (या उनकी जगह एक सार्वजनिक सेवा संदेश); दूसरा समूह अभियान को सामान्य रूप से देखता है। एक निर्धारित अवधि के बाद, कन्वर्ज़न दर, राजस्व, या जो भी मीट्रिक आप टेस्ट कर रहे हैं, उसकी दोनों समूहों के बीच तुलना करें। समूहों के बीच किसी भी बेसलाइन गैप के लिए समायोजित यह अंतर, उपचार का वृद्धिशील प्रभाव है।

प्लेटफ़ॉर्म इसे क्यों बनाते हैं#

सेल्फ-सर्व डिमांड-साइड प्लेटफ़ॉर्म वाले अधिकांश प्रमुख विज्ञापन प्लेटफ़ॉर्म अब बिल्ट-इन कन्वर्ज़न-लिफ्ट या होल्डआउट टेस्टिंग का कुछ रूप पेश करते हैं, क्योंकि विज्ञापनदाता लगातार वही सवाल पूछते रहे जिसका जवाब उनका अपना कन्वर्ज़न ट्रैकिंग डैशबोर्ड ईमानदारी से नहीं दे सकता था: क्या ये कन्वर्ज़न वैसे भी होते? एक मजबूत ROAS नंबर दिखाने वाला डैशबोर्ड संबद्ध कन्वर्ज़न की रिपोर्टिंग कर रहा है, जरूरी नहीं कि कारणित कन्वर्ज़न की, और केवल एक वास्तविक होल्डआउट ही दोनों को अलग कर सकता है।

फ़नल में कहाँ होल्डआउट टेस्ट का उपयोग होता है#

एक पूर्ण-चैनल होल्डआउट किसी नेटवर्क या चैनल को उपयोगकर्ताओं या क्षेत्रों के एक सबसेट के लिए रोक देता है, यह एक क्षेत्रीय लिफ्ट टेस्ट के पीछे का डिज़ाइन है। एक अभियान-स्तरीय होल्डआउट एक विशिष्ट अभियान को रोकता है जबकि अन्य जारी रहते हैं, जिससे चैनल के बेसलाइन से उस अभियान के प्रभाव को अलग किया जा सकता है। एक फ्रीक्वेंसी होल्डआउट एक उपयोगकर्ता को किसी विज्ञापन को कितनी बार देखता है, इसे सीमित करता है, और फिर परिणामों की तुलना एक अनकैप्ड समूह से करता है, जो क्रिएटिव फ़टीग और घटते रिटर्न को मापने के लिए उपयोगी है।

व्यावहारिक सीमाएँ#

होल्डआउट टेस्ट चलाने का मतलब है कि टेस्ट की अवधि के लिए कुछ वास्तविक, पते योग्य ग्राहकों को जानबूझकर विज्ञापन न दिखाना, जिसकी एक वास्तविक अल्पकालिक लागत होती है। यही वह ट्रेडऑफ़ है जिसे हर वृद्धिशीलता-दिमाग वाली टीम स्वीकार करती है: विश्वसनीय जवाब के बदले कुछ निकट-अवधि की पहुंच और राजस्व छोड़ना कि क्या खर्च वास्तव में काम करता है। सैंपल साइज़ भी मायने रखती है। एक होल्डआउट को सांख्यिकीय रूप से सार्थक अंतर का पता लगाने के लिए दोनों समूहों में पर्याप्त वॉल्यूम की आवश्यकता होती है; कम-ट्रैफ़िक वाले चैनल या छोटे अभियान का परीक्षण करने से अक्सर केवल शोर पैदा होता है जो परिणाम के रूप में प्रस्तुत किया जाता है।

परिणाम को सही ढंग से पढ़ना#

एक नल रिजल्ट, एक्सपोज़्ड और होल्डआउट समूहों के बीच कोई सार्थक अंतर न होना, एक वास्तविक निष्कर्ष है, न कि एक विफल टेस्ट। इसका मतलब है कि चैनल, कम से कम उस दर्शक और उस अवधि के लिए, वृद्धिशील मूल्य नहीं जोड़ रहा था, जो वैसे भी होता। किसी चैनल को मजबूत रिपोर्टेड नंबरों के आधार पर स्केल करने से पहले, जांचें कि क्या आपके वर्टिकल में प्रतिस्पर्धी भी वहां भारी विज्ञापन खर्च चला रहे हैं, क्योंकि लंबे समय तक चलने वाले क्रिएटिव, विज्ञापन दीर्घायु देखें, से भरा हुआ चैनल एक उचित प्रॉक्सी है जहां होल्डआउट टेस्ट वास्तविक लिफ्ट की पुष्टि करते हैं। OpenAdLibrary का विज्ञापन इंटेलिजेंस प्लेटफ़ॉर्म आपको टेस्ट बजट कमिट करने से पहले नेटवर्क और वर्टिकल द्वारा उस गतिविधि की जांच करने देता है।