چه زمانی از تگ نو ایندکس در صفحات استفاده میکنیم ؟

اگر می‌خواهید گوگل برخی از صفحات وب‌سایتتان را در نتایج جستجو نشان ندهد، تگ نوایندکس ابزاری است که به گوگل می‌گوید این صفحه را در نتایج جستجو نشان نده. برخلاف حذف یا بلاک شدن در روباتستی‌اکس که دسترسی را کاملاً می‌بندد، نوایندکس اجازه می‌دهد گوگل صفحه را ببیند و بخزاند ولی در نتایج جستجو نشان ندهد. از خدمات سئو وب سایت گرفته تا مدیریت مستقل یک فروشگاه، همه جاهایی که به نوایندکس نیاز دارد، درست و بهینه تنظیم شده است.

تگ noindex چیست و چه فرقی با robots.txt دارد؟

تگ noindex به گوگل دستور می‌دهد یک صفحه را بخواند اما در نتایج جستجو نشانش ندهد، در حالی که robots.txt اصلاً اجازهٔ خواندن صفحه را نمی‌دهد. این تفاوت به ظاهر کوچک به نتیجه‌های متفاوتی منجر می‌شود: اگر صفحه‌ای در robots.txt بلاک شود، گوگل اصلاً آن را نمی‌خزد پس تگ noindex درونش را هم نمی‌بیند و صفحه ممکن است همچنان بر اساس لینک‌های ورودی دیگر صفحات در نتایج ظاهر شود (بدون تیتر و توضیح). طبق مستندات رسمی گوگل، اگر هدف حذف کامل یک صفحه از نتایج جستجو است، راه درست استفاده از تگ noindex است، نه بستن‌کردن آن در robots.txt.

چه زمانی از تگ noindex استفاده کنیم؟

هفت موقعیت رایج برای استفاده از تگ noindex وجود دارد: محتوای تکراری، صفحات کم‌محتوا، آرشیو نویسنده‌های تک‌نویسنده، پست‌تایپ‌های سفارشی بی‌ارزش، صفحات تشکر، صفحات ورودی و نتایج جستجوی داخلی. در ادامه هر مورد را با ذکر مثال واقعی توضیح می‌دهیم.

1. جلوگیری از ایندکس محتوای تکراری

اگر دو صفحه از سایت شما محتوای یکسان یا بسیار شبیه را منتشر کنند (مثلاً نسخهٔ قابل‌چاپ یک صفحه کنار نسخهٔ اصلی)، گوگل ممکن است یکی از آن‌ها را به‌عنوان محتوای تکراری تشخیص دهد و ارزش رتبه‌بندی هر دو را پایین بیاورد. راه‌حل دقیق‌تر برای این مورد، لینک کنونیکال است؛ اما وقتی لینک کنونیکال امکان‌پذیر نیست (مثلاً نسخهٔ قابل‌چاپ)، noindex راه‌حل جایگزین است. اگر به این مورد رسیدگی نکنید، موتور جستجوگر ممکن است در انتخاب اینکه کدام نسخه را در نتایج نشان دهد دچار خطا شود و رتبهٔ سئو سایت شما آسیب ببیند.

2. جلوگیری از ایندکس محتوای کم‌ارزش

برخی صفحات سایت ذاتاً برای ایندکس شدن طراحی نشده‌اند و ارزشی برای جستجوگر ندارند؛ نمونهٔ بارز صفحهٔ تشکر که بعد از خرید نمایش داده می‌شود. این صفحات در برقراری ارتباط با مخاطبان نقش دارند اما ایندکس شدنشان هیچ سودی برای سئو سایت ندارد.

پست‌های سفارشی بی‌ارزش وردپرس هم در همین دسته جا می‌گیرند. مثلاً پست سفارشی که برای مشخصات یک محصول (مانند ابعاد و وزن) و نه برای مخاطبان ساخته می‌شوند، نوعی محتوای کم‌ارزش محسوب می‌شود و noindex منطقی است.

3. آرشیو نویسنده‌های تک‌نویسنده

اگر یک بلاگ وردپرس دارید و تنها نویسنده آن خودتان هستید، بیش از ۹۰ درصد از صفحات آرشیو نویسنده عیناً کپی صفحات اصلی وبلاگ هستند. ایندکس شدن این صفحات هم‌محتوای تکراری می‌سازد. بهتر است آرشیو نویسنده را کلاً غیرفعال کنید، اما اگر به هر دلیل فعال ماند، افزودن noindex روی قالبی که آرشیو را می‌سازد جلوی ایندکس شدن ده‌ها صفحهٔ مشابه را می‌گیرد.

4. پست‌های سفارشی بی‌ارزش (thin content)

صفحاتی مانند صفحهٔ تشکر بعد از خرید یا ثبت‌نام، محتوای مفیدی برای کاربر یا کلمهٔ کلیدی مشخصی ندارند. وقتی این صفحات ایندکس می‌شوند، در بهترین حالت تأثیری روی رتبه ندارند و در بدترین حالت می‌توانند تصور کلی گوگل از کیفیت سایت را پایین بیاورند. منطق مشابهی برای این دسته: پست‌هایی که صرفاً مشخصات محصول (ابعاد، وزن) را ثبت می‌کنند بدون اینکه متنی برای کاربر یا کلمهٔ کلیدی داشته باشند.

5. صفحات جستجوی داخلی

وقتی کاربری از جعبهٔ جستجوی داخلی سایت شما استفاده می‌کند، هدفش رسیدن به یک صفحهٔ مشخص است، نه دیدن یک صفحهٔ نتایج مشابه موتور جستجوگر. اگر گوگل صفحهٔ نتیجهٔ جستجوی داخلی سایت شما را ایندکس کند، همان صفحه در نتایج جستجوی کلی گوگل ظاهر می‌شود که تجربهٔ کاربری بدی می‌سازد. بیشتر افزونه‌های سئو از جمله رنک مت و ریو مدیا، صفحات جستجوی داخلی را به‌صورت پیش‌فرض noindex می‌کنند.

چگونه با رنک مت یا Yoast تگ noindex بگذاریم؟ اگر از Rank Math استفاده می‌کنید (مانند همین سایت)، در بخش ویرایش هر صفحه گزینهٔ «Robots Meta» را باز کنید و گزینهٔ «No Index» را فعال کنید. در Yoast SEO هم همین گزینه زیر بخش پیشرفتهٔ موتور جستجو قرار دارد. هر دو افزونه در نهایت یک خط <meta name="robots" content="noindex"> در بخش هد صفحه درج می‌کنند؛ کد خروجی یکسان است.

آرشیو نویسندگان بلاگ و صفحات ورودی را هم noindex کنیم؟

اگر تنها یک نویسنده دارید و بیش از ۹۰ درصد مطالب آرشیو با صفحات اصلی ۊکپی است، بله؛ اما اگر تیم نویسندگان متعدد دارید، پاسخ متفاوت است. اگر وبلاگ یک جامعهٔ بزرگ از نویسندگان را دارد و هر کدام محتوای منحصربه‌فردی تولید می‌کنند، آرشیو می‌تواند منبع واقعی از محتوای تازه باشد و نیازی به noindex ندارد. تصمیم به کیفیت واقعی محتوای آرشیو بستگی دارد، نه صرفاً به اینکه ارشیو است. صفحات ورودی به ادمین پنل که برای مخاطبان کاربردی ندارند هم در همین دسته جا می‌گیرند، مگر اینکه برای جامعهٔ بزرگی از مخاطبان هم کاربرد داشته باشند. در وردپرس اگر از این صفحات برای مشخصات ادمین استفاده می‌شود، به‌صورت پیش‌فرض noindex هستند.

آیا صفحات جستجوی داخلی وبسایت را noindex کنیم؟

بله؛ نمایش صفحات نتایج جستجوی داخلی در نتایج جستجوی گوگل تجربهٔ کاربری ضعیفی می‌سازد؛ خود گوگل هم رسماً توصیه کرده این صفحات noindex شوند. اگر از وردپرس و افزونهٔ سرچ کنسول استفاده می‌کنید، این صفحات به صورت پیش‌فرض noindex می‌شوند. اگر از پلتفرم دیگری استفاده می‌کنید یا مطمئن نیستید، با بررسی دستی چند عبارت در گوگل در مرورگر ناشناس می‌توانید مطمئن شوید وضعیت ایندکس این صفحات چگونه است. بررسی دقیق‌تر رفتار کاربران در این صفحات می‌تواند بخشی از سفارش سئو حرفه‌ای باشد.

جمع‌بندی

تگ noindex ابزاری دقیق برای کنترل ایندکس گوگل است، از محتوای تکراری تا صفحات تشکر و نتایج جستجوی داخلی. قاعدهٔ طلایی: برای جلوگیری از بلاک شدن، هرگز هم‌زمان از robots.txt و noindex برای یک صفحه استفاده نکنید؛ اگر می‌خواهید گوگل صفحه را نبیند و حذف کند، فقط از noindex استفاده کنید و اجازه دهید خزشده شود.

سوالات متداول

منابع

• مستندات رسمی گوگل دربارهٔ تگ ربات‌های noindex
• معرفی گوگل بر robots.txt و تفاوتش با noindex

Noindex فقط یکی از گزینه‌های ممیزی است و جای حذف یا اصلاح محتوای ضعیف را نمی‌گیرد. راهنمای هرس محتوای سایت کاربرد هر انتخاب را مقایسه می‌کند.