کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


بهترین روش تبیلغات نمایش تصاویر طراحی سه بعدی اولین شرکت طراحی وب سایت در یزد نقشه سایت جستجوگر سیستم مدیریت سامانه پیامک ESET NOD32 Antivirus 7 Google Drawing مادام العمر پورتال کارت تخفیف بیمارستان ها You probably tried to upload too large file روش تبلیغات ابر قدرت بیلبورد در همدان شبکه خصوصی وب سایت TeamViewer 10 برنامه نویسی شرکت طراحی وب یزد اخبار یزد سه بعدی نرم افزار حذف پسورد چک کردن بیلبورد در یزد نسخه کرک شده پیامک رایگان jQuery UI طراحی وب یزد بیلبورد در کرج تصاویری ۳۶۰ درجه ای HTML مدیران وب سایت cms حرفه ای بهینه سازی موتور جستجو طراحی ITVAN بی نهایت بیلبورد در مشهد فیلتر شکن 2015 ESET Remote Administrator Console ESET Remote Administrator Server بیلبورد در سمنان سیستم نوبت دهی پزشکان VIBER تبلیغات محیطی در یزد قیمت Firefox Download Crack TeamViewer 9.28223 سئو آنتی ویروس 2014 نوبت دهی Hotspot Shield Elite بمب گوگل ، گوگل وب مستر هنری تعرفه پانوراما تور مجازی 360 درجه پلانتی الکسا وب سایت ها سایت درمانگاه ها وب بیلبورد در تهران Code Anywhere وبمستر بیلبورد XML سئو و بهینه سازی طراحی ساده عکاسی گوگل تحت وب سئوی سایت فروش لایسنس ربات گوگل Rank Google Robot پاناروما بهترین شرکت طراحی وب سایت تفاوت نسخه رایگان و نسخه اصلی کاتالوگ آنلاین اپلیکیشن رسمی عکاسی گوگل الگوریتم های پاندا و پنگوئن وبسایت سیستم مدیریت ایمیل ملی سیستم مدیریت اعلام نمرات مدارس آتلیه تکنولوژی وب photo spheres پزشک W3C Validator Crack TeamViewer Enterprise 9.28 پرداخت آنلاین گوگل پنگوئن سیستم مدیریت کارت شارژ طراحی وب سایت آنی اد صفحات وب ،فیلم برداری صنعتی وب سایت در یزد آموزش تصویری طراحی وب شرکت طراحی و ب سایت در یزد نمونه کارها اسکریپت نوبت دهی پزشکان دوربین مداربسته در یزد TeamViewer HTML5 boilerplate تصاویر بندانگشتی خبر یزد وایبر اسکریپت گالری تصاویر تعرفه شرکت طراحی وب سایت در یزد TeamViewer Enterprise Firebug کاتالوگ Server Enterprise فیلتر شکن Dreamweaver بسته php پنالتی گوگل نرم افزار ارسال انبوه تلگرام شرکت وب سایت یزد ویندوز: XP-7-8 گوگل-goolge-طراحان سایت برتر کلینیک ها پیشرو پرداز داینامک بهترین روش شاه کلید وب خرید بلیط اینترنتی برنامه نویسی موبایل در یزد نامحدود یاهو vpn seo رتبه اول بیلبورد در مازندران پیشرو پرداز یزد وب مستر بیلبورد در شیراز حذف پسورد ویندوز معرفی سایت کرک google bomb اول شرکت طراحی یزد پارانوما سیستم مدیریت محتوا بیتا الگوریتم صفحه اول گوگل برنامه نویسی PHP تصاویر 360 درجه مصطفی رضایی رایگان سیستم فروشگاه ساز TeamViewer Enterprise 9.0.27614 نمونه کار طراحی وب سایت شورای انفورماتیک کشور یزد اندروید جستجو تصاویر در گوگل Ajax گوگل پلی پیج رنک web robots Fetch as Googlebot