Deduplication Systems مجموعهای از سیستمهای گوگل هستند که از نمایش چند نتیجه مشابه یا تکراری در صفحه نتایج جستوجو جلوگیری میکنند. هدف این سیستمها، ارائه نتایج متنوعتر به کاربران است تا بهجای مشاهده چند نسخه از یک محتوا، به صفحات مختلف و مرتبط با جستوجوی خود دسترسی داشته باشند.
برای مثال، فرض کنید یک خبرگزاری گزارشی درباره معرفی یک گوشی جدید منتشر میکند و چند وبسایت دیگر همان خبر را با تغییرات جزئی بازنشر میکنند. گوگل ممکن است تمام این صفحات را بررسی کند، اما برای جلوگیری از نمایش نتایج تکراری، فقط تعدادی از آنها را در صفحه جستوجو نشان دهد.
محتوای تکراری فقط به سایتهای مختلف محدود نمیشود. گاهی یک صفحه از داخل یک وبسایت نیز با چند آدرس متفاوت در دسترس است. این اتفاق معمولاً به دلیل وجود پارامترهای فیلتر، نسخههای مختلف URL یا دسترسی همزمان به صفحات از طریق HTTP و HTTPS رخ میدهد.
گوگل برای مدیریت چنین شرایطی از فرایندی به نام Canonicalization استفاده میکند. در این فرایند، گوگل از میان URLهای مشابه، نسخهای را که برای نمایش در نتایج جستوجو مناسبتر تشخیص میدهد، بهعنوان URL اصلی یا Canonical انتخاب میکند. البته انتخاب نهایی همیشه مطابق آدرسی نیست که مدیر سایت با تگ Canonical معرفی کرده است.
Deduplication Systems چه کاربردی در سئو دارد؟
این سیستمها اهمیت مدیریت محتوای تکراری و URLهای مشابه را در سئوی فنی نشان میدهند. اگر چند آدرس مختلف محتوای تقریباً یکسانی داشته باشند، گوگل برای انتخاب نسخه مناسب با چند URL مشابه روبهرو میشود. مدیریت درست این آدرسها، ساختار سایت را منظمتر میکند و از ایجاد صفحات غیرضروری در نتایج جستوجو جلوگیری میکند.
برای مثال، فرض کنید صفحهای از یک فروشگاه اینترنتی با دو آدرس زیر در دسترس باشد:
- example.com/products/shoes
- example.com/products/shoes?sort=price
اگر آدرس دوم فقط همان محصولات را با ترتیب متفاوت نمایش دهد، دو URL محتوای بسیار مشابهی خواهند داشت. در چنین شرایطی لازم است بررسی کنید که آیا هر دو آدرس ارزش حضور مستقل در نتایج جستوجو را دارند یا بهتر است یکی از آنها بهعنوان نسخه اصلی انتخاب شود.
برای مدیریت این وضعیت، اقدامات زیر را در نظر بگیرید:
- بررسی URLهای تکراری: با ابزارهایی مانند Google Search Console و ابزارهای خزش سایت، آدرسهایی را که محتوای مشابه دارند شناسایی کنید.
- تنظیم Canonical: برای صفحات واقعاً مشابه، در صورت مناسب بودن، با استفاده از تگ Canonical نسخه اصلی را به گوگل معرفی کنید.
- استفاده از ریدایرکت: اگر یک URL دیگر کاربرد مستقلی ندارد، ریدایرکت دائمی به آدرس اصلی را در نظر بگیرید.
- جلوگیری از تولید صفحات مشابه: برای هر صفحه هدف و ارزش مشخصی تعریف کنید تا چند URL غیرضروری برای ارائه محتوای یکسان ایجاد نشود.
نکته مهم این است که وجود محتوای تکراری لزوماً به معنای جریمه شدن سایت نیست. گوگل معمولاً نسخه مناسب را انتخاب میکند و نمایش URLهای مشابه را در نتایج مدیریت میکند. مشکل اصلی زمانی به وجود میآید که تعدد آدرسها ساختار سایت را پیچیده کند، کاربران را سردرگم سازد یا منابع خزش گوگل را صرف بررسی صفحات کمارزش و تکراری کند.