बॉट ट्रैफ़िक और स्पैम फ़िल्टरिंग: अपने डेटा से गैर-इंसानी विज़िट हटाएं

आपका ट्रैफ़िक अचानक दोगुना हो जाता है। बहुत अच्छा लगता है। फिर आप देखते हैं कि यह उछाल एक ही ऐसे देश से आया है जहां आप सेवा नहीं देते, और वही पेज बार-बार खुल रहा है। बॉट।

बॉट ट्रैफ़िक डिफ़ॉल्ट रूप से दिखाई नहीं देता। वह आपकी एनालिटिक्स रिपोर्ट में असली विज़िटर जैसा दिखकर आता है। वह आपके मेट्रिक्स फुलाता है, आपके कन्वर्ज़न रेट बिगाड़ता है और यह देखना नामुमकिन कर देता है कि असल में क्या काम कर रहा है।

बॉट ट्रैफ़िक में क्या गिना जाता है

हर गैर-इंसानी ट्रैफ़िक बुरा नहीं होता। आपकी साइट को क्रॉल करने वाले सर्च इंजन बॉट हैं। सोशल मीडिया के लिंक क्रॉलर भी बॉट हैं। ये जायज़ बॉट हैं जिन्हें आप अपने डेटा में चाहते हैं।

स्पैम बॉट अलग होते हैं। ये ऑटोमैटिक विज़िट हैं जो ट्रैफ़िक मेट्रिक्स फुलाने, एनालिटिक्स में हेरफेर करने या स्क्रैपिंग के लिए आपकी साइट क्रॉल करने के मकसद से बनाई जाती हैं। ये आपका डेटा बिगाड़ते हैं और आपके संसाधन बर्बाद करते हैं।

जायज़ बॉट

सर्च इंजन (Google और दूसरे सर्च इंजन)। सोशल मीडिया क्रॉलर (जैसे Facebook के)। मॉनिटरिंग और अपटाइम चेक करने वाले बॉट। ये बॉट किसी काम के लिए होते हैं और आमतौर पर आपके एनालिटिक्स में शामिल रहने चाहिए, हालांकि कुछ टीमें इंसानी व्यवहार पर ध्यान देने के लिए इन्हें बाहर रखती हैं।

स्पैम बॉट

रेफ़रल स्पैम बॉट जो नकली रेफ़रल ट्रैफ़िक बनाते हैं। क्लिक फ़्रॉड बॉट जो कन्वर्ज़न की नकल करते हैं। स्क्रैपर बॉट जो आपका कंटेंट उठा ले जाते हैं। ब्रूटफ़ोर्स बॉट जो कमज़ोरियां टटोलते हैं। इनका कोई जायज़ मकसद नहीं होता और ये आपका डेटा बिगाड़ते हैं।

शक वाले जायज़ बॉट

कुछ बॉट बीच के दायरे में काम करते हैं। डेटा सेंटर के IP जो आपकी साइट को पिंग करते हैं। एफ़िलिएट ट्रैकर जो यूज़र जैसे दिखते हैं। विज्ञापन वेरिफ़िकेशन बॉट जो यह जांचने के लिए विज्ञापनों पर क्लिक करते हैं कि वे चल रहे हैं। ये तकनीकी रूप से जायज़ हैं, पर आपके लक्ष्य के हिसाब से आपके मेट्रिक्स बिगाड़ सकते हैं।

बॉट आपका एनालिटिक्स कैसे बिगाड़ते हैं

फुलाए हुए ट्रैफ़िक के आंकड़े

बॉट आपके पेजव्यू की गिनती बढ़ा देते हैं। आपको लगता है कि आपकी साइट पर रोज़ 1,000 विज़िटर आ रहे हैं, पर उनमें 300 बॉट हैं। आपका असली इंसानी ट्रैफ़िक सिर्फ़ 700 है। आप फुलाए हुए आंकड़ों के आधार पर फ़ैसले ले रहे हैं।

बिगड़े हुए कन्वर्ज़न रेट

कुछ बॉट कन्वर्ज़न इवेंट ट्रिगर कर देते हैं। वे बटन क्लिक करते हैं। वे फ़ॉर्म सबमिट करते हैं। आपके कन्वर्ज़न की गिनती असलियत से बेहतर दिखती है। आपका कन्वर्ज़न रेट असल से ज़्यादा लगता है।

टेढ़े-मेढ़े ट्रैफ़िक सोर्स

रेफ़रल स्पैम बॉट ऐसा दिखाते हैं कि ट्रैफ़िक उन साइटों से आया जिन्होंने आपको कभी रेफ़र किया ही नहीं। आपकी रेफ़रल ट्रैफ़िक रिपोर्ट नकली सोर्स से गंदी हो जाती है। हो सकता है आप ऐसे सोर्स के साथ पार्टनरशिप बना लें जो असली नहीं हैं।

बिगड़ा हुआ एट्रिब्यूशन

बॉट ऐसे सेशन बनाते हैं जो आपके एट्रिब्यूशन मॉडल को उलझा देते हैं। वे विज्ञापनों पर क्लिक करते हैं, फिर चले जाते हैं, फिर लौट आते हैं। आपका एट्रिब्यूशन मॉडल उन्हें ऐसे कन्वर्ज़न का श्रेय देता है जो उन्होंने कराए ही नहीं। बॉट की वजह से हुई समस्याओं का दोष असली सोर्स पर चला जाता है।

बॉट ट्रैफ़िक को कैसे पहचानें

ऐसे ट्रैफ़िक पैटर्न देखिए जो इंसानी व्यवहार से मेल नहीं खाते

बॉट के पैटर्न अनुमान लगाने लायक होते हैं। हर सेशन में पेजव्यू की बिल्कुल एक जैसी गिनती। पेज स्क्रॉल या साइट पर बिताए समय में कोई फ़र्क नहीं। ऐसे देशों से ट्रैफ़िक जो आपके बिज़नेस से मेल नहीं खाते। कुछ ही सेकंड में कई कन्वर्ज़न। ये पैटर्न गैर-इंसानी ट्रैफ़िक का संकेत देते हैं।

अपने एनालिटिक्स टूल की बॉट फ़िल्टरिंग इस्तेमाल कीजिए

ज़्यादातर एनालिटिक्स टूल में बॉट पहचानने की सुविधा पहले से होती है। Google Analytics में जाने-पहचाने बॉट को बाहर रखने का एक चेकबॉक्स है। यह विज्ञापन इंडस्ट्री की जाने-पहचाने बॉट की सूची के आधार पर फ़िल्टर करता है। इसे सबसे पहले चालू कीजिए। यह साफ़ दिखने वाले बॉट को बिना किसी गलत पहचान के पकड़ लेता है।

स्पैम पैटर्न के लिए कस्टम फ़िल्टर बनाइए

कुछ स्पैम बॉट स्टैंडर्ड फ़िल्टर से निकल जाते हैं। अपने डेटा में पैटर्न ढूंढिए: एक ही IP से बहुत ज़्यादा ट्रैफ़िक, जाने-पहचाने डेटा सेंटर IP रेंज से ट्रैफ़िक, ज़ीरो बाउंस टाइम वाले सेशन, और बॉट से आए ऐसे कन्वर्ज़न जो आपके सर्वर लॉग में साफ़ तौर पर बॉट बताए गए हैं।

इन पैटर्न को बाहर करने के लिए फ़िल्टर बनाइए। सावधान रहिए। बहुत सख़्त फ़िल्टर असली ट्रैफ़िक भी बाहर कर सकता है। फ़िल्टर को अपनी मुख्य रिपोर्ट पर लगाने से पहले टेस्ट कीजिए।

अपने सर्वर लॉग से तुलना कीजिए

सर्वर लॉग में यूज़र-एजेंट की जानकारी दिखती है, जो एनालिटिक्स टूल कभी-कभी चूक जाते हैं। अपने सर्वर लॉग में ऐसे यूज़र एजेंट ढूंढिए जो साफ़ तौर पर बॉट हैं। सर्वर लॉग में उन यूज़र एजेंट के ट्रैफ़िक की तुलना उससे कीजिए जो एनालिटिक्स में दिखता है।

अगर आपके सर्वर लॉग एनालिटिक्स से काफ़ी ज़्यादा ट्रैफ़िक दिखाते हैं, तो फ़र्क की वजह बॉट हो सकते हैं। सोर्स की जांच कीजिए।

बॉट ट्रैफ़िक को कैसे फ़िल्टर करें

बिल्ट-इन बॉट फ़िल्टरिंग चालू कीजिए

अपने टूल की अपनी बॉट फ़िल्टरिंग चालू कीजिए। Google Analytics में Admin > View Settings > Bot Filtering पर जाइए। बॉक्स पर टिक कीजिए। इससे आपका डेटा बिगाड़े बिना जाने-पहचाने बॉट रिपोर्ट से बाहर हो जाते हैं।

IP पर आधारित बहिष्करण बनाइए

अगर बॉट ट्रैफ़िक खास IP रेंज से आता है, तो उन्हें बाहर करने के लिए फ़िल्टर बनाइए। पहले अपने खुद के IP जान लीजिए, ताकि गलती से अपनी टीम या अपने ऑफ़िस को बाहर न कर दें। फिर जाने-पहचाने स्पैम IP रेंज या डेटा सेंटर IP जोड़िए जो असली विज़िटर नहीं हैं।

यूज़र-एजेंट के आधार पर फ़िल्टर कीजिए

कुछ एनालिटिक्स टूल यूज़र-एजेंट स्ट्रिंग से फ़िल्टर करने देते हैं। बॉट अक्सर यूज़र-एजेंट में खुद को बता देते हैं। अगर आपका टूल यह सुविधा देता है, तो जाने-पहचाने बॉट यूज़र-एजेंट फ़िल्टर कर दीजिए। यह साफ़ दिखने वाले बॉट पर बेहतर चलता है, चालाक बॉट पर कम।

बॉट के विश्लेषण के लिए सेगमेंट बनाइए

बॉट को पूरी तरह बाहर करने से पहले एक ऐसा सेगमेंट बनाइए जो उन्हें अलग दिखाए। इससे आप असर माप सकते हैं। कितना ट्रैफ़िक बॉट का है? उनके बिना आपका असली बाउंस रेट क्या है? समस्या का दायरा समझने से आप फ़िल्टर करने के बेहतर फ़ैसले ले पाते हैं।

समझौता: बॉट को बाहर रखें या रखें

बॉट को बाहर रखने के कारण

बॉट असली यूज़र व्यवहार की आपकी समझ बिगाड़ते हैं। असली कन्वर्ज़न रेट। असली बाउंस रेट। असली ट्रैफ़िक पैटर्न। अगर आप इंसानी यूज़र के अनुभव के लिए ऑप्टिमाइज़ कर रहे हैं, तो बॉट ट्रैफ़िक शोर है जिसे बाहर रखना चाहिए।

बॉट को अपने डेटा में रखने के कारण

बॉट आपकी साइट पर आ रहे असली ट्रैफ़िक को दिखाते हैं। वे बैंडविड्थ खाते हैं। वे सर्वर लोड पर असर डाल सकते हैं। कुछ टीमें यह देखने के लिए बॉट डेटा से इंसानी विज़िटर को अलग कर देती हैं कि गैर-इंसानी ट्रैफ़िक कैसा दिखता है। बॉट को रखना आपको अपनी साइट के ट्रैफ़िक की बनावट के बारे में कुछ ज़रूरी बताता है।

व्यावहारिक हल

अलग-अलग व्यू या सेगमेंट बनाइए। एक व्यू में फ़ैसले लेने के लिए बॉट फ़िल्टरिंग चालू रखिए। दूसरे व्यू में पूरी तस्वीर समझने के लिए सारा ट्रैफ़िक रखिए। इस तरह आपको इंसानी सच और ट्रैफ़िक की पूरी हकीकत, दोनों दिखते हैं।

अक्सर पूछे जाने वाले सवाल