آموزش ایجاد یک فایل robots.txt بهینه برای وردپرس

6

همانطور که میدانید فایل robots.txt برای وردپرس و دیگر cms ها برای دسترسی دادن و یا اجازه ندادن به موتور های جستجو گر جهت بررسی و یا عدم بررسی یک مسیر از دایرکتوری سایت شما می باشد.در صورتی که قصد ساخت فایل robots.txt برای وردپرس رو دارید می توانید این مقاله را تا پایان مطالعه کنید.

در صورتی که به موتور جستجو گر گوگل در فایل robots.txt اجازه دسترسی برای بررسی را نداده باشید ، موتور جستجوگر گوگل نیز وارد این مسیر نشده و آدرس ها و دایرکتوری هایی که در آن وجود دارد نیز ایندکس نخواهد شد.

اصولا robots.txt برای وردپرس برای بستن دستیابی گوگل به مسیر های مدیریت و فایل های غیر ضروری جهت بررسی می باشد ، البته سئو کار های حرفه ای غیر از این موارد نیز از کاربرد های دیگر آن استفاده میکنند.

آموزش ایجاد یک فایل robots.txt بهینه برای وردپرس

در صورتی که آموزش ایجاد robots.txt برای وردپرس را که برای شما قرار داده ایم ، به خوبی انجام دهید ، به هدایت گوگل کمک زیادی کرده اید.همچنین شما میتوانید با ساختن robots.txt برای وردپرس یک حریم خصوصی نیز برای دایرکتوری های خود داشته باشید.

در صورتی که میخواهید یک آدرس سایت شما داخل موتور های جست و جو گر ایندکس نشود و شامل اطلاعات شخصی شما نیز می باشد می توانید با ویرایش فایل robots.txt این کار را انجام دهید.
در صورتی که یک سایت شامل فایل robots.txt بهینه برای وردپرس باشد ، گوگل از این سایت یک درک بهتر برای بررسی دایرکتور هایش خواهد داشت و به جاهایی که نیازی نیست مراجعه کند ، دسترسی نخواهد داشت.

آموزش ایجاد یک فایل robots.txt بهینه برای وردپرس

شما می توانید با تنظیم کردن یک فایل robots.txt برای وردپرس به صورت بهینه تایم بیشتر گوگل را برای بررسی کردن آدرس های ضروری خود قرار دهید.با اینکار سرعت ایندکس شدن مطالب جدید سایت شما نیز افزایش پیدا میکند ، زیرا به جای اینکه گوگل جایی که لازم نیست را بررسی کند به بررسی مطالب جدید سایت شما خواهد پرداخت.

وظیفه فایل robots.txt برای وردپرس

همانطور که مشخص شد robots.txt برای وردپرس نقش یک کنترل کننده جهت دسترسی داند و یا ندارند به عنکبوت های گوگل جهت بررسی یا بررسی نکردن یک دایرکتوری ، آدرس و یا پوشه شما می باشد.همچنین در فایل robots.txt برای وردپرس می توانید تعیین کنید که چه نوع فایلی توسط گوگل خوانده شود و چه نوع فایلی خوانده نشود.

به طور مثال شما می توانید دسترسی گوگل را از طریق robots.txt ببندید یا باز کنید ، در صورتی که دسترسی گوگل به تصاویر از طریق فایل robots.txt برای وردپرس بسته شود ، دیگر تصاویر شما ایندکس نخواهد شد.

از جمله اشتباهاتی که صورت میگیرد نیز همین مورد است که تصاویر در فایل robots.txt برای وردپرس دسترسی به گوگل آن بسته شده و مدیر سایت مشاهده میکند که عکس هایی که انتشار داده است ایندکس نمیشود و این سوال برای او مطرح میشود که را تصاویر سایتم ایندکس نمیشود !

ساخت فایل robots.txt برای وردپرس

حال که با نحوه کار فایل robots.txt برای وردپرس آشنا شدیم ، در ادامه قصد داریم این آموزش را قرار دهیم که چگونه یک فایل robots.txt برای وردپرس را به صورت بهینه بسازیم.برای ساخت یک فایل robots.txt می توانید به هاست خود وارد شده و سپس به قسمت فایل منیجر هاست خود یا همان مدیریت فایل مراجعه کنید.

در بین دایرکتوری هایی که مشاهده میکنید به قسمت /public_html/ مراجعه کنید و در این بخش با کلیک کردن بر روی New File Name یک فایل با اسم robots.txt ایجاد نمایید و در پایان بر روی Create New File کلیک کنید..

ناگفته نماند در صورتی که وردپرس را نصب کرده اید و افزونه های سئو آن را نیز نصب کرده اید ، این فایل داخل هاست شما وجود خواهد داشت و نیازی به ایجاد دوباره آن نمی باشد.بعد از اینکه فایل robots.txt برای وردپرس ایجاد شد و یا داخل هاست شما موجود بود می توانید بر روی آن کلیک راست کرده و بر روی ویرایش کردن کلیک کنید.

توجه داشته باشید که robots.txt برای وردپرس دارای یک سری دسترور های خاص خود می باشد و در این فایل قابلیت نوشتن کد های اچ تی ام ال و همچنین سی اس اس برای شما وجود نخواهد داشت.

قوانین robots.txt برای وردپرس چیست !

در صورتی که میخواهید خودتان فایل robots.txt را به صورت بهینه سازی شده بنویسد . باید گفت که این فایل دارای دو دستور اصلی می باشد که با استفاده از این دو دستور می توانید کد های مورد نظر خود را برای دسترسی دادن به گوگل بنویسید.

اولین دستوری که با آن مواجه می شوید ، دستور User-agent می باشد که با استفاده از این دستور می توانید مشخص کنید که چه دسته ای از ربات های گوگل به آن مطلب می توانند دسترسی داشته باشند و یا قادر به ایندکس کردن آدرس های آن نباشند.

شاید تعداد این دستور ها کم باشد ، ولی شما با استفاده از این دو دستور می توانید کار های مختلفی را انجام دهید و دسترسی گوگل را به آنجایی که می خواهید بدهید و به آنجایی که نمیخواهید ندهید.

در صورتی که مقابل User-agent را * قرار بدهید ، به این معنی است که این متن فایل برای تمامی ربات های گوگل نوشته شده است و دسترسی و یا عدم دسترسی را برای تمامی ربات ها مشخص کرده اید.

User-agent: *
Disallow: /test/

در این مثال زده شده به تمامی ربات های گوگل گفته شده است که به دایرکتوری test سایت دسترسی نداشته باشند.به طور مثال در صورتی که آدرس سایت example.com باشد گوگل درسترسی به آدرس example.com/test/ نخواهد داشت.

robots.txt برای وردپرس

قوانین robots.txt برای وردپرس

با این دستور قرار داده شده شما می توانید آدرس هایی که دلخواه شما نمی باشد که گوگل آن را بررسی کند ببندید و کافی است که آدرس دایرکتوری را داخل کد Disallow قرار دهید تا توسط ربات های گوگل بررسی نشود.

همچنین شما می توانید دسترسی گوگل را به صورت کامل نسبت به سایت خود ببندید که گاهی اوقات اینکار به اشتباه نیز صورت گرفته و ایندکس های یک سایت پاک میشود و مدیر سایت تصور میکند که سایتش دچار پنالتی شده است.

دستور بستن درستی ربات های گوگل به صورت کامل از یک سایت به صورت زیر می باشد :

User-agent: *
Disallow: /
اسماعیل فدائی
اسماعیل فدائی

اسماعیل یک مدرس و نویسنده خلاق است،همچنین مدیر و توسعه دهنده لرن دی ال

۲ دیدگاه
نمایش همه مفید ترین بالاترین امتیاز کمترین امتیاز یک دیدگاه ارسال کنید
  1. با سلام خدمت مهندس فدائی بزرگوار
    بسیار ممنون از مطالب جامع و کاملی که ارائه میفرمائید.
    در صورتی که براتون مقدوره فایل روبوتز سایت مرا چک کنید تا درصورتی که مشکلی دارد رفع کنم.
    ttp://www.onlinelovestore.com/robots.txt
    پیشاپیش از لطفتون سپاسگزارم
    مریم عباسی

    • سلام و عرض ادب
      از لطف و عنایت شما بی نهایت سپاسگذارم.
      لینک شما رو بررسی کردم ظاهرا همه چی اوکی و مشکلی نداره،
      موفق و پیروز باشید

دیدگاه شما

14000+

کاربران فعال سایت

730+

محصولات فارسی سایت

18000+

تیکت های مشتریان

6

سال فعالیت حرفه ای

لرن دی ال
Logo