مجله اینترنتی بیر کلیک فناوری اینترنت بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

0
4
بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر
لینک کوتاه مطلب : http://birclick.ir/fGdRx

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

بهینه سازی فایل robots در وردپرس :  فایل robots.txt در وردپرس ، نقش مهمی در سئو و رتبه بندی موتور جستجو دارد . این فایل به شما کمک می کند که از ایندکس کردن و خزیدن رباتهای موتور جستجو در بخش هایی از سایت خود جلوگیری کنید . هر چند، گاهی اوقات ممکن است پیکربندی اشتباه فایل robots.txt سایت شما را کاملا از دسترس موتورهای جستجو خارج کند . بنابراین، این مهم است که پس از انجام تغییرات ، فایل robots.txt به خوبی بهینه سازی شود و دسترسی به بخش مهم سایت شما را مسدود نکند .

SEO شامل صدها عنصر است و یکی از بخش های مهم آن فایل robots.txt می باشد . این فایل متنی کوچک که در روت وب سایت شما قرار دارد ، می تواند به بهینه سازی وب سایت شما کمک کند. بسیاری از وب مستر ها تمایل دارند که از ویرایش فایل robots.txt جلوگیری کنند اما این کار سختی نیست و با دانستن نکات مهم و پایه میتوان این فایل را ایجاد و ویرایش کرد . پیشتر با نحوه ساخت و پیکربندی بهینه فایل robots برای نتایج سئو  آشنا شدیم . در این بخش از مجله اینترنتی بیر کلیک قصد داریم به صورت تخصصی با بهینه سازی فایل robots در وردپرس آشنا شویم .  لطفا همراه ما شوید .

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر
بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

فایل robots.txt وردپرس و لزوم استفاده از آن

فایل robots.txt کمک می کند تا ربات موتور جستجو به صفحاتی که باید ایندکس کند هدایت شود. هنگامی که ربات یا اسپایدر موتور جستجو برای ایندکس صفحات به سایت شما وارد میشود ابتدا به دنبال فایل robots.txt میگردد و مسیر این فایل را برای ایندکس کردن صفحات وب سایت شما دنبال خواهد کرد .

همچنین بخوانید :   ساخت و پیکربندی بهینه فایل robots برای نتایج سئو

اگر از وردپرس استفاده میکنید ، فایل robots.txt را میتوانید در روت وردپرس خود بیابید . در وب سایت های استاتیک، اگر این فایل توسط شما یا برنامه نویس وب سایت تان ایجاد شده باشد، آن را در پوشه روت خود پیدا خواهید کرد. در غیر اینصورت میتوانید با استفاده از Notepad به سادگی یک فایل ایجاد کرده و با نام robots.txt آن را ذخیره کنید . سپس این فایل را با استفاده از FTP به دایرکتوری روت دامنه خود ارسال کنید.

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر
بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

ایجاد فایل robots.txt

همانطور که قبلا ذکر شد، robots.txt به طور کلی نام یک فایل متنی است. بنابراین، اگر این فایل را در وب سایت خود نداشته باشید، با استفاده از ویرایشگر متن مورد نظر خود (به عنوان مثال : Notepad ) آن را با یک یا چند رکورد ایجاد کنید. هر رکورد حاوی اطلاعات مهمی برای موتور جستجو است. به عنوان مثال:

User-agent: googlebot
Disallow: /cgi-bin

اگر این خط در فایل robots.txt نوشته شود ، اجازه می دهد ربات گوگل همه صفحات سایت شما را به جز پوشه cgi-bin در دایرکتوری روت ایندکس کند. این بدان معناست که ربات گوگل ، پوشه cgi-bin را ایندکس نخواهد کرد .

با استفاده از گزینه Disallow شما می توانید هر ربات و یا اسپایدر موتور جستجو را برای ایندکس کردن هر صفحه یا پوشه محدود کنید. سایت های بسیاری هستند که این فایل را به گونه ای تنظیم میکنند که پوشه Archive و یا صفحاتی که حاوی محتوای تکراری هستند ایندکس نشوند.

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر
بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

وارد کردن نام ربات موتور جستجو 

اگر می خواهید بازدید کنندگان زیادی از موتورهای جستجو داشته باشید، باید به هر ربات جستجو اجازه دهید صفحات سایت شما رو ایندکس کنند. مطابق مثال زیر با قرار دادن مقدار * برای User-agent به هر ربات جستجو اجازه ایندکس صفحات را خواهید داد :

همچنین بخوانید :   ساخت و پیکربندی بهینه فایل robots برای نتایج سئو

User-agent: *
Disallow: /cgi-bin

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر
بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر

نکات مهم  در ایجاد فایل robots.txt

در فایل robots.txt از Comment استفاده نکنید.

در ابتدای هر خط و یا بین حروف هر کلمه خط فاصله قرار ندهید. به عنوان مثال :

غلط صحیح
User-agent: *
Dis allow: /support
User-agent: *
Disallow: /support

قواعد و ترتیب دستورات را تغییر ندهید :

غلط صحیح
Disallow: /support
User-agent: *
User-agent: *
Disallow: /support

اگر می خواهید چند پوشه توسط موتور های جستجو ایندکس نشود، آنها را به صورت پشت سر هم قرار ندهید :

غلط صحیح
User-agent: *
Disallow: /support /cgi-bin /images/
User-agent: *
Disallow: /support
Disallow: /cgi-bin
Disallow: /images

از حروف بزرگ وکوچک به درستی استفاده کنید ، به عنوان مثال شما می خواهید دایرکتوری “Download” ایندکس نشود و در فایل robots.txt آن را به صورت “Download” می نویسید ، این باعث اشتباه ربات موتور جستجو خواهد شد.

اگر می خواهید تمام صفحات و دایرکتوری سایت شما ایندکس شوند ، رکوردهای زیر را قرار دهید :

User-agent: *
Disallow:

اما اگر می خواهید هیچ یک از صفحات و دایرکتوری سایت شما ایندکس نشوند ، رکوردهای زیر را قرار دهید :

User-agent: *
Disallow:/

پس از ویرایش از طریق FTP فایل robots.txt را در روت یا صفحه اصلی دایرکتوری سایت خود آپلود کنید.

چند مثال از نحوه استفاده از فایل robots.txt

 

برای آشنایی بیشتر و کاربردی تر، در زیر چند مثال با تنظیمات متفاوت را آورده ایم.

استفاده از فایل robots.txt و مسدود کردن یک فولدر برای تمام ربات ها:

User-agent: *
Disallow: /old-posts/

استفاده از فایل robots.txt و مسدود کردن یک فایل برای تمام ربات ها:

User-agent: *
Disallow: /old-posts/mypic.jpg

استفاده از فایل robots.txt و مسدود کردن یک فایل در ریشه سایت برای تمام ربات ها:

همچنین بخوانید :   ساخت و پیکربندی بهینه فایل robots برای نتایج سئو

User-agent: *
Disallow: /private.html

استفاده از فایل robots.txt و مسدود کردن یک فولدر برای یک ربات خاص:

User-agent: Googlebot
Disallow: /personal/

برای دیدن لیست کامل واسط های کاربری (User-agent) می توانید به دیتابیس موجود در آدرس زیر مراجعه کنید:

http://www.robotstxt.org/db.html

مسدود بودن تمام صفحات برای تمام ربات ها:

User-agent: *
Disallow: /

مجاز بودن تمام صفحات برای تمام ربات ها:

User-agent: *
Allow: /

بهینه سازی فایل robots در وردپرس برای کسب سئو بهتر نوشته شده در تاریخ : توسط کاربر
به اشتراک بگذارید...
بارگذاری مقالات بیشتر مرتبط

پاسخ دهید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

11 − یک =

اینم جالبه

ساخت و پیکربندی بهینه فایل robots برای نتایج سئو

ساخت و پیکربندی بهینه فایل robots برای نتایج سئو ساخت و پیکربندی بهینه فایل robots : حتما …