डुप्लीकेट कंटेंट और कैनोनिकल टैग: ये इंडेक्सिंग को कैसे प्रभावित करते हैं

डुप्लीकेट कंटेंट शायद ही कभी पूरा कॉपी-पेस्ट होता है

ज़्यादातर डुप्लीकेट कंटेंट दो बिल्कुल एक जैसे आर्टिकल नहीं होते — यह एक ही पेज होता है जो कई URL से पहुंचा जा सकता है: www के साथ और बिना, ट्रेलिंग स्लैश के साथ और बिना, http और https पर, ट्रैकिंग या सॉर्ट पैरामीटर जोड़े हुए, या अपने खुद के URL पर बैठा एक प्रिंटर-फ्रेंडली वर्शन। एक क्रॉलर के लिए, इनमें से हर एक एक अलग URL है जो संयोगवश वही कंटेंट रेंडर करता है।

यह इंडेक्सिंग को क्यों नुकसान पहुंचाता है, सिर्फ़ रैंकिंग को नहीं

आम धारणा यह है कि डुप्लीकेट कंटेंट सिर्फ़ रैंकिंग सिग्नल को वर्शनों के बीच बांट देता है। असल में, सर्च इंजन अक्सर एक कदम आगे जाते हैं और बस एक वर्शन को इंडेक्स करने के लिए चुन लेते हैं और बाकी को काफ़ी हद तक अनदेखा कर देते हैं — और यह ज़रूरी नहीं कि वह वर्शन हो जिसे आप वाकई चाहते थे। यह एक पेज के "Crawled - currently not indexed" में रहने की एक ज़्यादा आम, कम स्पष्ट वजहों में से एक है: इसे क्रॉल किया गया, किसी दूसरे URL के बराबर पहचाना गया, और बस उसके पक्ष में छोड़ दिया गया।

एक कैनोनिकल टैग असल में क्या करता है

एक <link rel="canonical" href="..."> टैग किसी क्रॉलर को बताता है: कई URL यहां तक पहुंच सकते हैं, लेकिन यह खास वाला वह वर्शन है जिसे इंडेक्स और क्रेडिट किया जाना चाहिए। हर इंडेक्स करने लायक पेज में एक कैनोनिकल टैग होना चाहिए — जिसमें खुद की ओर इशारा करता एक सेल्फ़-रेफ़रेंसिंग टैग भी शामिल है — ताकि यह कभी अस्पष्ट न रहे कि कोई पेज का अपना कंटेंट किस URL को प्रामाणिक मानता है।

यह एक संकेत है, कोई निर्देश नहीं

सर्च इंजन कैनोनिकल टैग को एक मज़बूत सिग्नल मानते हैं, कोई पूर्ण नियम नहीं — कुछ हद तक साइटमैप की तरह। अगर दूसरे मज़बूत सिग्नल असहमत हैं (उदाहरण के लिए, ज़्यादातर एक्सटर्नल बैकलिंक नॉन-कैनोनिकल वर्शन की ओर इशारा करते हैं), तो एक सर्च इंजन आपके बताए गए URL के बजाय किसी दूसरे URL को इंडेक्स करना चुन सकता है। कैनोनिकल टैग तब सबसे अच्छा काम करते हैं जब वे पेज पर मौजूद हर दूसरे सिग्नल के साथ सुसंगत हों: इंटरनल लिंक, साइटमैप एंट्री, और रीडायरेक्ट सभी को एक ही URL पर सहमत होना चाहिए।

आम कैनोनिकलाइज़ेशन गलतियां

• किसी कैनोनिकल टैग को ऐसे URL पर पॉइंट करना जो कहीं और रीडायरेक्ट होता है — क्रॉलर को चेन फॉलो करनी पड़ती है, जो एक ऐसे सिग्नल में घर्षण जोड़ता है जिसे अस्पष्टता हटानी थी।
• किसी कैनोनिकल टैग को ऐसे पेज पर पॉइंट करना जिसमें खुद एक noindex टैग हो — विरोधाभासी सिग्नलों की एक जोड़ी जो दोनों वर्शन को अनइंडेक्स्ड छोड़ सकती है।
• पेजिनेटेड सीरीज़ में असंगत कैनोनिकल (हर पेज पेज 1 की ओर वापस इशारा करता है) जबकि हर पेज में वास्तव में यूनीक, इंडेक्स करने लायक कंटेंट है जिसे अलग रखना बेहतर है।
• एक साइटवाइड टेम्पलेट बग जो हर पेज को होमपेज पर कैनोनिकलाइज़ कर देता है — दुर्लभ, लेकिन विनाशकारी, और किसी भी टेम्पलेटिंग बदलाव के बाद स्पॉट-चेक करने लायक।

इसे आगे के लिए ठीक करना

अपने डोमेन के लिए एक कैनोनिकल फ़ॉर्म चुनें (www या नहीं, ट्रेलिंग स्लैश या नहीं) और सर्वर लेवल पर हर दूसरे वेरिएंट को इसकी ओर रीडायरेक्ट करें — एक कैनोनिकल टैग एक सेकेंडरी सिग्नल है, यह वाकई डुप्लीकेट URL को पहली जगह 200 रिस्पॉन्स के तौर पर सर्व न करने का विकल्प नहीं है। एक बार वह सुसंगत हो जाए, तो सुनिश्चित करें कि आपका साइटमैप हर पेज का सिर्फ़ कैनोनिकल वर्शन ही लिस्ट करे — किसी नॉन-कैनोनिकल URL को लिस्ट करना एक ऐसा सिग्नल भेजता है जो सीधे पेज के अपने कैनोनिकल टैग का खंडन करता है।