تگ Noindex چیست؟ با تاثیر تگ نوایندکس در سئو سایت آشنا شوید
متاتگ Noindex یکی از پرکاربردترین متاتگ‌های سئو است که اگر به موقع و برای صفحات درست از آن استفاده شود، تاثیر به سزایی در بهبود سئو سایت خواهد داشت. همانطور که در مطالب آموزشی قبلی بیان شد، یکی از روش‌های جلوگیری از ایندکس صفحات سایت، استفاده از فایل robots.txt است. اما در این مطلب قصد داریم روش دیگری برای جلوگیری از ایندکس صفحات دسته بندی و آرشیو و … به شما عزیزان آموزش دهیم. اگر می‌خواهید بدانید که تگ Noindex چیست و چه تاثیری در سئو دارد، در ادامه این مطلب همراه ما باشید.
متاتگ Noindex چیست؟
متا تگ “noindex” به موتورهای جستجو می‌گوید كه یک صفحه خاص را در نتایج جستجو نشان ندهند. متداولترین روش برای نوایندکس کردن صفحات سایت، اضافه کردن آن به بخش هد HTML یا هدر پاسخ (response header) است. نکته حائز اهمیت این است که صفحاتی که دارای تگ noindex هستند، نباید از طریق فایل robots.txt، بلاک یا Disallow شده باشند. چرا که در غیر این صورت ربات‌های گوگل این تگ را نمی‌بینند و صفحه در نتایج گوگل نمایش داده خواهد شد.
حال که پاسخ سوال تگ Noindex چیست را پیدا کردید، بهتر است نگاهی کوتاه به تفاوت Noindex با Nofollow و Disallow داشته باشیم.
- Noindex: موتورهای جستجو، صفحه یا صفحات سایت شما را در نتایج جستجو نشان نمی‌دهند.
- Nofollow: لینک‌های داخلی صفحه یا صفحات سایت شما بررسی و دنبال نمی‌شوند.
- Disallow: خزنده‌ها صفحه یا صفحات سایت شما را پیمایش نمی‌کنند.
در حقیت تفاوت میان Noindex و Disallow در اینجاست که در حالت Noindex، خزنده‌های گوگل صفحات نوایندکس شده را دنبال می‌کنند و تنها این صفحات را در نتایج جستجوی گوگل نمایش نخواهند داد. اما در حالت Disallow؛ به طور کلی به خزنده‌های گوگل اجازه دنبال کردن صفحات داده نمی‌شود.
نحوه استفاده از متا تگ نو ایندکس
برای استفاده از این متا تگ و نو ایندکس کردن یک صفحه از صفحات وب سایت، روش‌های مختلفی پیش روی شما قرار دارد که در ادامه به معرفی آن‌ها خواهیم پرداخت.
- همانطور که گفته شد، یکی از روش‌های استفاده از این متا تگ، اضافه کردن آن به بخش هد HTML است. برای استفاده از این روش، کافی است که قطعه کد زیر را کپی کرده و در فایل HTML قرار دهید.
<!DOCTYPE html>
<html><head>
<meta name=”robots” content=”noindex” />
(…)
</head>
<body>(…)</body>
</html> بخش دوم از این کد، مشخص می‌کند که تمام لینک‌های درون صفحه از نوع follow هستند و باید توسط ربات‌ها بررسی شوند.
۲٫ روش دوم، استفاده از X-Robots-Tag در هدر HTTP است. البته این در صورتی کارآمد خواهد بود که شانس آورده و گوگل Robot.txt را دنبال کند. (طبق چیزی که خود گوگل گفته، حتمی وجود ندارد که حتما Robot را دنبال کند.)
X-Robots-Tag: noindex
۳٫ روش سوم هم استفاده از افزونه یوآست است که در ادامه به صورت مفصل به آن پرداخته شده است. در حقیقت استفاده از یواست سئو، بسیار ساده بوده و میتوانید هر یک از صفحات مورد نظر خود را به شکل تک به تک، به حالت ایندکس یا غیر آن دربیاورید.
چگونه از تگ Noindex در فایل Robots.txt استفاده کنم؟
برای جلوگیری از نمایش برخی از صفحات سایت در نتایج گوگل می‌توان از تگ Noindex در فایل Robots.txt استفاده کرد. گرچه این روش توسط گوگل توصیه نمی‌شود، اما استفاده از آن زمانی کارایی خواهد داشت که قصد دارید تعداد زیادی از صفحات سایت را باهم نوایندکس کرده و تجربه کدنویسی و نحوه کار با فایل robots.txt را دارید.
Noindex: /robots-txt-noindexed-page/
کدام یک از صفحات سایت باید نوایندکس شوند؟
در ادامه به چند نمونه از کاربرد تگ نوایندکس در سئو اشاره می‌کنیم. البته به خاطر داشته باشید مواردی که در ادامه معرفی می‌کنیم قاعده کلی نیستند و بسته به نوع سایت و هدف از صفحات، شرایط متفاوت خواهد بود.
آرشیو نویسنده سایت
در صورتی که سایت شما یک نویسنده دارد، بهتر است از تگ Noindex برای صفحه مربوط به نویسنده استفاده کنید. چرا که احتمالا ۹۰ درصد از صفحه مربوط به نویسنده، مشابه با همان صفحه بلاگ سایت است. بنابراین با استفاده از این تگ از ایجاد صفحات تکراری و در آخر جریمه گوگل جلوگیری خواهید کرد. برای انجام این کار میتوانید به راحتی از افزونه Yoast استفاده کنید. کافی است که مراحل زیر را دنبال کنید:
- وارد پیشخوان وردپرس شده و گزینه “سئو” را انتخاب کنید.
- از منویی که نمایش داده می‌شود، روی گزینه “بهبود ظاهر جستجوها” کلیک کنید.
- در صفحه‌ای که نمایش داده می‌شود روی گزینه “بایگانی‌ها” کلیک کنید.
- تاگل مربوط به “بایگانی‌های نویسنده” را از حالت فعال به غیر فعال تغییر داده و روی ذخیره تغییرات کلیک کنید.
- در این صورت افزونه یوآست به صورت خودکار صفحه‌ای که از قبل ایجاد شده را به صفحه خانه سایت ریدایرکت ۳۰۱ کرده و آن را از نقشه سایت حذف خواهد کرد.
برخی از صفحات خاص سایت
به عنوان مثال تصور کنید که یک سایت فروشگاهی برای فروش نرم افزار دارید. طبیعتا این نوع محصولات، دارای ابعاد و جنس خاصی نیستند. در نتیجه نیازی به فعال بودن تمام قابلیت‌های ووکامرس نیست. در این شرایط می‌توان صفحات مربوط به ووکامرس را غیر فعال کرد و از صفحات مخصوص خود سایت استفاده کرد. علاوه بر این، در برخی موارد، برخی از صفحات نه برای کاربر و نه برای گوگل چندان مثمر ثمر نیستند. در این شرایط بهتر است که به کاربرد تگ نوایندکس در سئو توجه داشت و از این متاتگ برای صفحاتی با محتوای غیر مفید، استفاده کرد.
صفحات خوش آمدید یا تشکر
این صفحات معمولا زمانی استفاده می‌شوند که مخاطب برای اولین بار در سایت ثبت نام کرده، خرید کرده یا ایمیلش را در بخش خبرنامه وارد می‌کند. این صفحات معمولا به منظور بهبود تجربه کاربری استفاده شده و برای گوگل و خزنده‌هایش حرف زیادی برای گفتن ندارند! بنابراین بهتر است که برای آن‌ها از تگ Noindex استفاده کنید.
صفحات ادمین و ورود سایت
احتمالا می‌دانید که صفحات ادمین و ورود سایت معمولا نباید ایندکس شوند، چرا که برای کاربر خارجی کاربردی ندارند. اما جالب است بدانید که در حال حاضر تعداد زیادی از صفحات ورود به سایت توسط گوگل ایندکس شده‌اند. اگر نمی‌خواهید جز شما و اعضای مجموعه‌تان کسی به صفحه ورود سایت دسترسی داشته باشد، باید از متا تگ noindex استفاده کنید. اگر از CMS وردپرس استفاده می‌کنید، جای نگرانی نیست چرا که به صورت پیش فرض این صفحه نوایندکس در نظر گرفته شده است.
صفحه نتایج سرچ داخلی
یکی از مواردی که باعث خراب کردن تجربه کاربری می‌شود، هدایت کاربر به صفحه نتایج سرچ داخلی به جای هدایت به نتیجه اصلی است! بنابراین بهتر است که از تگ Noindex برای صفحات سرچ استفاده شود. البته به خاطر داشته باشید لینک‌های داخلی صفحات سرچ ارزش زیادی دارند و باید از نوع follow دنبال شوند. بنابراین باید از کد زیر برای این صفحات استفاده کنید.
<meta name=”robots” content=”noindex, follow”>
خبر خوب این که در صورتی که افزونه یوآست را نصب کرده باشید، این صفحات به صورت خودکار نوایندکس می‌شوند. در صورتی که به این ویژگی نیاز ندارید، میتوانید از فیلترهای Yoast استفاده کنید.
| سایت | Robots.txt disallow | noindex |
| Amazon | نه | نه |
| Barnes & Noble | بله | بله |
| Bath & Body Works | بله | نه |
| Best Buy | نه | نه |
| GameStop | بله | بله |
| Home Depot | بله | نه |
| Lands’ End | بله | نه |
| Sur La Table | بله | بله |
| Target | بله | بله |
| Walmart | بله | نه |
آیا صفحات دسته بندی و آرشیو سایت باید نوایندکس شوند؟
صفحات آرشیو و دسته بندی سایت جز آن دسته از صفحاتی هستند که می‌توانند هم برای ترافیک ارگانیک سایت مفید باشند و هم در برخی موارد به یک دردسر بزرگ برای سئو سایت تبدیل شوند! به عنوان مثال صفحه دسته بندی برای یک فروشگاه اینترنتی باید یک لندینگ پیج جذاب با توضیحات جامع و کامل در خصوص محصولات همان دسته باشد. این صفحات زمانی به یک دردسر بزرگ تبدیل می‌شوند که برای کلماتی رتبه بگیرند که شما برنامه دیگری برایشان دارید.
بنابراین اگر این صفحات کوئری‌های اضافه برای شما ایجاد کرده و با دیگر صفحات داخلی سایت همپوشانی دارند، بهتر است که در حالت نوایندکس و follow تنظیم شوند. دقت داشته باشید که این تصمیمات ممکن است مقطعی باشند. به طور مثال در یک شرایط، برای صفحه‌ای تصمیم گیری کرده باشید که در حالت ایندکس قرار بگیرد و در شرایطی دیگر نیاز باشید که همین صفحه، در حالت نوایندکس قرار بگیرد.
نحوه استفاده از Yoast برای جلوگیری از ایندکس صفحات
برای اضافه کردن این تگ به صفحه، باید وارد صفحه مورد نظرتان و سپس بخش پیشرفته افزونه یوآست شوید. اولین سوالی که نمایش داده می‌شود، این است که “به موتورهای جستجو اجازه نمایش نوشته در نتایج جستجو را می‌دهید؟” به صورت پیش فرض این گزینه در حالت بله تعیین شده است. با انتخاب گزینه “نه” متا تگ noindex به صورت خودکار به کدهای صفحه اضافه خواهد شد. به خاطر داشته باشید اگر صفحه پیش از این توسط موتورهای جستجو ایندکس شده باشد، مدتی زمان می‌برد تا از نتایج جستجو خارج شود. چرا که خزنده‌ها باید مجددا به صفحه مراجعه کرده، آن را ایندکس کنند و کد نوایندکس را مشاهده کرده و تغییرات را اعمال کنند.
آیا لینک‌های داخلی صفحات نوایندکس ارزشمند هستند؟
زمانی که حالت صفحه را نوایندکس تعیین می‌کنید، افزونه یوآست به صورت پیش فرض حالت لینک‌های داخلی را follow تعیین می‌کند. بنابراین موتورهای جستجو لینک‌های داخلی صفحه را بررسی کرده و آن‌ها را ایندکس می‌کنند. در شرایطی که به هر ترتیبی مایل به تغییر این وضعیت باشید، باید لینک‌ها را به صورت دستی نوفالو کنید. با این حساب در نظر بگیرید که نوایندکس کردن با نوفالو کردن لینک‌ها، دو مقوله کاملا جدا از هم هستند که باید هر یک را در جای صحیح خود مورد استفاده قرار داد.
نحوه رفع خطای noindex در گوگل سرچ کنسول
در رابطه با متا تگ نوایندکس، معمولا دو نوع خطا در سرچ کنسول نمایش داده می‌شود.
- Submitted URL marked ‘noindex’
این خطا زمانی ایجاد می‌شود که شما درخواست ایندکس یک URL را دارید، در حالی که از تگ noindex’ برای همان صفحه استفاده کرده‌اید. بنابراین اگر می‌خواهید این صفحه در نتایج جستجوی گوگل نمایش داده شود، باید پیش از هر چی