डोमेन खरीदना आम तौर पर एक नई शुरुआत जैसा लगता है। आप स्पेलिंग देखते हैं, TLD देखते हैं और कीमत देखते हैं। लेकिन एक अहम चीज़ हम अक्सर भूल जाते हैं: उसका इतिहास।
मैंने यह सबक मुश्किल तरीके से सीखा। मैंने एक ऐसा डोमेन खरीदा जो पहली बार 2000 में रजिस्टर हुआ था। शुरुआत में वह शानदार सौदा लगा—जब तक सर्वर लॉग भरने नहीं लगे।
पहला दिन: बॉट्स का हमला
लॉन्च के लगभग तुरंत बाद मेरे ट्रैफ़िक लॉग तेज़ी से बढ़ गए। लेकिन ये असली यूज़र नहीं थे। मेरी नई साइट पर मौजूद ही नहीं रहने वाले URL पर हर दिन 1,000 से ज़्यादा रिक्वेस्ट आने लगीं।
बाद में साफ हुआ कि यह बॉट्स की एक पूरी फौज थी जो सालों पहले मौजूद पेज ढूँढ़ रही थी। वे इस डोमेन के पुराने जीवन को खोज रहे थे और लगभग शून्य एंगेजमेंट के साथ डायरेक्ट ट्रैफ़िक का बड़ा स्पाइक बना रहे थे।
इससे SEO को नुकसान क्यों होता है
समस्या सिर्फ़ सर्वर लोड नहीं थी। असली दिक्कत यह थी कि सर्च इंजन इस शोर को कैसे समझ रहे थे।
क्योंकि बॉट्स लगातार इन मृत URL पर हिट कर रहे थे, Yandex ने मान लिया कि शायद ये पेज अब भी महत्वपूर्ण हों। उसका क्रॉलर इन भूतिया रास्तों को बार-बार आक्रामक रूप से क्रॉल करने लगा और हर बार 404 (नहीं मिला) त्रुटियों से टकराता रहा। एक ही रात में मेरे Webmaster Tools डैशबोर्ड पर 900 से ज़्यादा त्रुटियाँ दिखने लगीं।
समाधान: 404 बनाम 410
कई डेवलपर गायब पेजों के लिए सामान्य 404 पर ही निर्भर रहते हैं। इस मामले में वह पर्याप्त नहीं था। सर्च इंजन के लिए 404 का मतलब अक्सर यह होता है: “अभी नहीं मिला, बाद में फिर देख लेंगे।”
इस नुकसान को रोकने के लिए मुझे Status 410 (Gone) पर जाना पड़ा।
410 रिस्पॉन्स साफ और अंतिम संकेत देता है। यह क्रॉलर से कहता है: “यह पेज हमेशा के लिए जा चुका है। इसे इंडेक्स में मत रखो।”
इन पुराने पाथ्स के लिए टार्गेटेड 410 रिस्पॉन्स लागू करना ही वह एक कदम था जिसने बॉट्स का शोर बंद किया और मेरी SEO स्थिति को साफ किया। अगर आप पुराना डोमेन खरीद रहे हैं, तो सिर्फ़ नई साइट लॉन्च मत कीजिए—पुरानी साइट की footprint भी ऑडिट कीजिए और पहले दिन से 410 रणनीति तैयार रखिए।