کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


TeamViewer 10 اپلیکیشن رسمی عکاسی گوگل تعرفه پانوراما تور مجازی 360 درجه طراحی وب سایت طراحی Firebug سیستم مدیریت کارت شارژ طراحی ساده سئو بیلبورد در کرج بهترین روش فیلتر شکن ربات گوگل پاناروما تحت وب شبکه خصوصی مصطفی رضایی طراحی وب یزد شرکت وب سایت یزد سیستم مدیریت محتوا بیتا jQuery UI دوربین مداربسته در یزد شورای انفورماتیک کشور Server Enterprise HTML5 boilerplate ابر قدرت اسکریپت نوبت دهی پزشکان TeamViewer Enterprise پیامک رایگان سه بعدی بیلبورد در یزد اندروید وبسایت مدیران وب سایت پیشرو پرداز یزد مادام العمر تعرفه برنامه نویسی PHP seo سیستم فروشگاه ساز کاتالوگ سیستم مدیریت ایمیل ملی سئوی سایت ITVAN سیستم نوبت دهی پزشکان robots نوبت دهی You probably tried to upload too large file وب خرید بلیط اینترنتی بیلبورد در مازندران TeamViewer اسکریپت گالری تصاویر سئو و بهینه سازی web اول شرکت طراحی یزد XML تصاویری ۳۶۰ درجه ای بیلبورد در سمنان برنامه نویسی جستجو تصاویر در گوگل Crack TeamViewer Enterprise 9.28 گوگل پنگوئن گوگل وب مستر ،فیلم برداری صنعتی معرفی سایت فروش لایسنس نامحدود نمونه کارها نرم افزار ارسال انبوه تلگرام Ajax بسته قیمت جستجوگر صفحات وب پیشرو پرداز نمونه کار طراحی وب سایت حرفه ای داینامک Firefox HTML عکاسی گوگل برتر اولین شرکت طراحی وب سایت در یزد تصاویر 360 درجه گوگل پلی شرکت طراحی وب یزد پرداخت آنلاین بیلبورد الگوریتم های پاندا و پنگوئن آنی اد الکسا پزشک پیج رنک وب سایت ها کلینیک ها Google Robot تبلیغات محیطی در یزد cms وایبر فیلتر شکن 2015 تصاویر بندانگشتی بی نهایت Fetch as Googlebot Rank وبمستر بیلبورد در تهران هنری یاهو شاه کلید وب روش تبلیغات Code Anywhere وب مستر پارانوما بیلبورد در مشهد ESET Remote Administrator Server الگوریتم بهینه سازی موتور جستجو W3C Validator Download Crack TeamViewer 9.28223 تفاوت نسخه رایگان و نسخه اصلی بهترین روش تبیلغات طراحی سه بعدی نسخه کرک شده طراحی وب نرم افزار حذف پسورد کرک بیمارستان ها درمانگاه ها نمایش تصاویر برنامه نویسی موبایل در یزد رایگان پنالتی گوگل آنتی ویروس 2014 آموزش تصویری پورتال کارت تخفیف بیلبورد در همدان خبر یزد TeamViewer Enterprise 9.0.27614 Hotspot Shield Elite آتلیه کاتالوگ آنلاین شرکت طراحی وب سایت در یزد google bomb بمب گوگل ، php VIBER بیلبورد در شیراز گوگل-goolge-طراحان سایت سایت بهترین شرکت طراحی وب سایت اخبار یزد یزد ESET Remote Administrator Console وب سایت ESET NOD32 Antivirus 7 تکنولوژی وب vpn photo spheres Google Drawing صفحه اول گوگل ویندوز: XP-7-8 شرکت طراحی و ب سایت در یزد Dreamweaver سیستم مدیریت سامانه پیامک پلانتی نقشه سایت رتبه اول سیستم مدیریت اعلام نمرات مدارس وب سایت در یزد حذف پسورد ویندوز چک کردن