شاید برخی فکر کنند حرف زدن و مذاکره با این خزنده های بی زبان گوگل و به طور کلی تمام ربات هایی که در دیده شدن صفحات سایت ها نقش دارند غیرممکن باشند. شاید هم تصور می کنند اصلا ربات های گوگل آن قدر پیچیده و باهوش هستند که نیازی نباشد یک وبمستر با آن ها در ارتباط باشد و بخواهد تنظیمات خاصی را برای ایندکس شدن یا نشدن پیج ها اعمال کند. جالب است بدانید مدت ها است یک زبان مشترک رو به توسعه بین موتورهای جستجو و وب سایت های مختلف اختراع شده است که این ارتباط را تسهیل کرده است. از نگاه سئو این زبان بین المللی و منحصر به فرد دو پارامتر اساسی دارد: فایل Robots.txt و متا تگ های robots.
به صورت پیش فرض ایندکس شدن تمام صفحات ( صفحاتی غیر از فرم های جستجو، ثبت نام و…) در سایت توسط گوگل انجام می شود. در واقع گوگل هر چه که توسط سایت ها منتشر شود را از قلم نمی اندازد و آن ها را به صورت یکسان تحت نظر می گیرد و از این الگو برای رتبه بندی آن ها استفاده می کند. اما این روند زمانی که مشکلات اساسی مثل ناکارآمدی کلمات کلیدی در برخی از صفحات سایت رخ دهد دیگر جوابگو نیست و حتی ممکن است به ضرر سایت تمام شود. در چنین مواردی متا تگ های robots به عنوان یکی از بخش های ضروری در هر سایت به ما کمک می کنند تا ایندکس شدن صفحات سایت را سفارشی کنیم و در واقع برای گوگل تعیین تکلیف نماییم!
معرفی متا تگ های robots و کاربرد آن ها در سئو سایت های وردپرسی موضوعی است که آموزش سئو امروز ما بدان اختصاص دارد. شما هم می توانید با یادگیری اصولی همین عناصر جزئی وضعیت سایتتان را اصولی تغییر دهید!
در این مطلب می‌خوانید:
متا تگ های robots و کاربرد آن ها در سئو سایت های وردپرسی
متا تگ های robots دستور العمل هایی در جهت ایندکس صفحات می باشند که به خزنده یا اسپایدر های موتورهای جستجو می گویند چه صفحه خاصی از سایت باید ایندکس شود. این تگ ها به متخصصان سئو کمک می کنند چه صفحاتی مستقیما توسط گوگل دنبال شوند و چه صفحاتی به صورت کلی از دید او مخفی بمانند.
کاربرد متا تگ های ربات در سئو
همان طور که گفتیم متا تگ های robots هدایت کننده های موتور جستجو هستند که ایندکس شدن یا ایندکس نشدن یک صفحه را مشخص می کنند. استفاده و به کارگیری این متا تگ های دشوار نیست. پیش از استفاده کاربردی این تگ ها ابتدا باید انواع آن ها را شناسایی کنید.
به طور کلی در فضای وب ما تنها 4 متا تگ ربات داریم:
- متا تگ Follow
- متا تگ Index
- متا تگ Nofollow
- متا تگ Noindex
تنظیم این متا تگ ها زمان زیادی نمی برد. در چهار گام ساده می توانید از این ابزارها در جهت سئو بهتر صفحات سایت خود استفاده نمایید:
- کلید های ترکیبی CTRL + U را فشار دهید. با این کار تب جدیدی در مرورگر باز می شود که نمایش متنی همان صفحه در قالب کد ها خواهد بود
- بخش هایی از کدهای موجود در صفحه را که با <head> شروع شده اند کپی کرده و مثلا در قالب فایلی جداگانه در نوت پد یا نرم افزار ورد ذخیره سازی کنید
- در همین بخش ها می توانید انواع متا تگ های robots معرفی شده را تزریق کنید. مثلا تگ Noindex را قرار دهید تا یک صفحه از لیست ایندکس خارج شود
در تصویر زیر نمایی از متا تگ های robots از نوع Follow و Noindex را مشاهده می کنید که بعد از robots در خط اول جای گرفته اند:
گفتنی است تگ های ربات در سئو توسط بزرگ ترین موتورهای جستجو دنیا یعنی گوگل، یاهو و بینگ قابل ردیابی هستند. بنابراین نیازی نیست برای هر موتور جستجو به صورت مستقل این کدها را به کار ببرید.
بررسی انواع متا تگ های robots
همان طور که گفته شد 4 نوع متا تگ ربات وجود دارد که وبمستران بر اساس همان صفحه ای که قصد دارند این تگ ها را در آن به کار ببرند باید تعدادی از آن ها را انتخاب کنند. اما هر یک از این متا تگ ها چه کاربردی دارند و دقیقا چه زمانی باید از آن ها استفاده کرد؟
- متا تگ های index و follow: این متا تگ ها به ربات ها اجازه می دهد تا هم صفحه را ایندکس کنند و هم لینک های داخلی موجود در آن را دنبال نمایند
- متا تگ های noindex و nofollow:این تگ ها موتور جستجو را از ایندکس کردن صفحه و دنبال کردن لینک های آن منع می کنند
- متا تگ های index و nofollow: به کارگیری این دو تگ با هم به موتور جستجو می گوید که صفحه را ایندکس کند اما لینک ها را نادیده بگیرد
- متا تگ های noindex, follow: با این تگ ها پیج به صورت کلی از دید گوگل خارج می شود؛ چه خودش و چه لینک هایش!
به جز موارد گفته شده متا تگ های ربات دیگری هم وجود دارند که خیلی به ندرت مورد استفاده قرار می گیرند:
- none
- noarchive
- nosnippet
- unavailabe_after
- noimageindex
- nocache
- noodp
- notranslate
همان طور که می بینید متا تگ های ربات برای بهینه سازی تک تک صفحات سایت ما ضروری هستند.
قوانین مهم در استفاده از متا تگ های robots
- نسبت به بزرگی یا کوچکی حروف متا تگ ها حساس باشید. گوگل و سایر موتور جستجو های موجود به کوچکی و بزرگی مقادیر مختلف حساس هستند و می توانند آن را ردیابی و سپس تغییر دهند.
- از به کارگیری چند تگ <meta> اجتناب کنید. این کار باعث ایجاد تداخل و بی نظمی در کدها می شود. برای استفاده همزمان مثلا دو نوع متا تگ ربات از جداکننده به شکل زیر استفاده کنید:
<meta name=“robots” content=“noindex, nofollow”>
- در صورتی که چندین خط کد با متا تگ های مختلف دارید از متا تگ های متعارض استفاده نکنید. مثلا استفاده همزمان nofollow و follow باعث می شود که فقط متا تگ ربات nofollow عمل کند.
- در صورتی که می خواهید متا تگ های خود را برای موتور جستجو گوگل اختصاصی کنید به جای استفاده از robots از googlebot استفاده کنید. مطابق با مثال زیر:
<meta name=“googlebot” content=“nofollow”>
