مدتی قبل طی یک نظرسنجی در لینکدین پرسیده بودم که آیا صفحات ایندکس نشده میتوانند در نتایج جستجو ظاهر شوند یا خیر. بیش از ۷۰ درصد معتقد بودند که چنین چیزی امکانپذیر نیست. با این حال این تصور نادرست است و این صفحات در موارد زیادی در نتایج جستجو ظاهر میشوند.
برای درک علت این موضوع ابتدا لازم است به مفهوم کنونیکالیزیشن (Canonicalization) مراجعه کنیم. کنونیکالیزیشن به این موضوع میپردازد که وقتی گوگل با چند صفحه یکسان یا تقریبا یکسان مواجه میشود چگونه ورژن اصلی (کنونیکال) و ورژن های داپلیکیت را شناسایی میکند و با هر کدام از آنها چگونه برخورد میکند. در ادامه در این خصوص بیشتر توضیح خواهم داد.
سیگنال هایی که گوگل به کمک آنها ورژن کنونیکال را تعیین میکند به شرح زیر هستند:
پس از تعیین ورژن کنونیکال به کمک سیگنال های فوق ورژن های دیگر به عنوان Alternate تشخیص داده میشوند و پیج رنک آنها به ورژن کنونیکال منتقل میشود. ورژن های Alternate هرگز ایندکس نمیشوند اما اگر گوگل تشخیص دهد که برای کاربران گزینه مناسبی هستند ممکن است در نتایج جستجو ظاهر شوند. در ادامه مثال هایی را در این زمینه مطرح خواهم کرد.
حالتهای زیادی وجود دارد که در آنها ورژنهای Alternate میتوانند در نتایج جستجو ظاهر شوند. در این قسمت ۳ مورد از این حالات را توضیح خواهم داد.
در سایت هایی که نسخه موبایل جداگانه در یک ساب دامین دارند (مثل ویکیپدیا) این ساب دامین برای کاربرانی که در موبایل جستجو میکنند ظاهر میشود. این در حالی که صفحات موجود در ساب دامین موبایل به نسخه دسکتاپ در دامین اصلی کنونیکال شده اند.
در سایت هایی که صفحات آنها نسخه AMP در کنار نسخه غیر AMP دارد ورژن AMP در نتایج جستجوی کاربران موبایل ظاهر میشود. این در حالی است که ورژن AMP به ورژن غیر AMP کنونیکال میشود.
زمانی که یک دامین به یک دامین جدید منتقل میشود گوگل ممکن است URL های قدیمی را در نتایج جستجو نمایش دهد علی رغم اینکه URL های جدید ایندکس شده اند و به عنوان کنونیکال انتخاب شده اند. این امر زمانی اتفاق میافتد که گوگل تشخیص دهد کاربران با دامین جدید مانوس نیستند. به تدریج که کاربران به دامین جدید عادت کنند دیگر این ورژن های Alternate در نتایج جستجو ظاهر نخواهند شد.
در این مقاله کوتاه توضیح دادم که مفهوم کنونیکالیزیشن چیست و چطور صفحات ایندکس نشده در نتایج جستجو ظاهر میشوند. امیدوارم مطالعه این مقاله برای شما مفید بوده باشد. اگر در خصوص هر یک از مفاهیم مطرح شده سوالی دارید لطفا در بخش نظرات بپرسید. در اسرع وقت پاسخگوی شما خواهم بود.
https://developers.google.com/search/docs/crawling-indexing/consolidate-duplicate-urls
https://developers.google.com/search/docs/crawling-indexing/301-redirects