کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


سیستم مدیریت کارت شارژ ESET NOD32 Antivirus 7 Google Robot قیمت بهینه سازی موتور جستجو Hotspot Shield Elite شاه کلید وب دوربین مداربسته در یزد وب شرکت وب سایت یزد وبسایت مادام العمر کاتالوگ تصاویر 360 درجه هنری وایبر Firebug نرم افزار حذف پسورد Server Enterprise بمب گوگل ، photo spheres بهترین شرکت طراحی وب سایت چک کردن بسته مدیران وب سایت تصاویری ۳۶۰ درجه ای سیستم مدیریت اعلام نمرات مدارس تبلیغات محیطی در یزد اخبار یزد آنی اد TeamViewer TeamViewer 10 خبر یزد سایت بیلبورد در شیراز web بیلبورد در یزد Download Crack TeamViewer 9.28223 وب سایت ها پیامک رایگان رایگان پارانوما جستجو تصاویر در گوگل گوگل-goolge-طراحان سایت طراحی وب سایت یزد وب مستر شرکت طراحی وب سایت در یزد بهترین روش تبیلغات طراحی وب یزد شورای انفورماتیک کشور طراحی وب اول شرکت طراحی یزد کرک نرم افزار ارسال انبوه تلگرام google bomb robots بیلبورد در مشهد آموزش تصویری اولین شرکت طراحی وب سایت در یزد گوگل وب مستر ابر قدرت نقشه سایت طراحی سه بعدی پیشرو پرداز یزد صفحات وب الگوریتم های پاندا و پنگوئن ربات گوگل بهترین روش HTML5 boilerplate ESET Remote Administrator Server برنامه نویسی اپلیکیشن رسمی عکاسی گوگل بیلبورد در تهران پاناروما TeamViewer Enterprise 9.0.27614 روش تبلیغات Firefox vpn معرفی سایت نامحدود بیلبورد در کرج حرفه ای یاهو VIBER سیستم نوبت دهی پزشکان داینامک اندروید خرید بلیط اینترنتی پرداخت آنلاین پیج رنک XML php نمایش تصاویر اسکریپت نوبت دهی پزشکان طراحی الگوریتم سئو Google Drawing بیلبورد در همدان وبمستر seo تعرفه پانوراما تور مجازی 360 درجه درمانگاه ها وب سایت در یزد سیستم فروشگاه ساز تعرفه بیلبورد در سمنان فیلتر شکن الکسا ITVAN تفاوت نسخه رایگان و نسخه اصلی تکنولوژی وب ESET Remote Administrator Console مصطفی رضایی نمونه کارها پلانتی You probably tried to upload too large file کاتالوگ آنلاین برنامه نویسی PHP ،فیلم برداری صنعتی ویندوز: XP-7-8 TeamViewer Enterprise jQuery UI بیمارستان ها سه بعدی Rank طراحی ساده آنتی ویروس 2014 cms برنامه نویسی موبایل در یزد صفحه اول گوگل بی نهایت گوگل پلی شرکت طراحی و ب سایت در یزد Fetch as Googlebot سیستم مدیریت محتوا بیتا عکاسی گوگل سئوی سایت سئو و بهینه سازی پنالتی گوگل نسخه کرک شده گوگل پنگوئن حذف پسورد ویندوز تصاویر بندانگشتی Crack TeamViewer Enterprise 9.28 بیلبورد پورتال کارت تخفیف رتبه اول شبکه خصوصی فیلتر شکن 2015 Ajax سیستم مدیریت ایمیل ملی Code Anywhere آتلیه تحت وب پیشرو پرداز وب سایت جستجوگر نمونه کار طراحی وب سایت HTML Dreamweaver سیستم مدیریت سامانه پیامک پزشک فروش لایسنس بیلبورد در مازندران کلینیک ها برتر W3C Validator اسکریپت گالری تصاویر شرکت طراحی وب یزد نوبت دهی