کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


بیلبورد در کرج TeamViewer Enterprise 9.0.27614 بهترین روش وایبر نمایش تصاویر سئوی سایت پورتال کارت تخفیف آنی اد رایگان گوگل وب مستر الکسا HTML اسکریپت نوبت دهی پزشکان سیستم مدیریت اعلام نمرات مدارس کرک تصاویر 360 درجه حرفه ای اندروید خرید بلیط اینترنتی تعرفه نسخه کرک شده الگوریتم بیلبورد در یزد نمونه کار طراحی وب سایت ربات گوگل تصاویری ۳۶۰ درجه ای سیستم مدیریت سامانه پیامک Google Drawing پاناروما اخبار یزد قیمت کلینیک ها پزشک وب مستر وب سایت برتر نامحدود jQuery UI کاتالوگ آنلاین طراحی وب TeamViewer Enterprise پارانوما سیستم فروشگاه ساز تفاوت نسخه رایگان و نسخه اصلی پیامک رایگان وب سیستم مدیریت ایمیل ملی Download Crack TeamViewer 9.28223 حذف پسورد ویندوز XML پیج رنک seo تصاویر بندانگشتی طراحی بهترین شرکت طراحی وب سایت صفحات وب نوبت دهی شرکت طراحی و ب سایت در یزد بیلبورد در مشهد الگوریتم های پاندا و پنگوئن رتبه اول یاهو Server Enterprise پرداخت آنلاین سیستم مدیریت محتوا بیتا گوگل پلی google bomb Dreamweaver جستجوگر Code Anywhere خبر یزد روش تبلیغات گوگل پنگوئن تحت وب نقشه سایت معرفی سایت Hotspot Shield Elite تعرفه پانوراما تور مجازی 360 درجه مصطفی رضایی دوربین مداربسته در یزد You probably tried to upload too large file طراحی وب یزد وبمستر طراحی ساده بمب گوگل ، TeamViewer php web هنری برنامه نویسی موبایل در یزد فیلتر شکن بیلبورد در همدان پیشرو پرداز یزد اپلیکیشن رسمی عکاسی گوگل پیشرو پرداز اسکریپت گالری تصاویر عکاسی گوگل بسته شرکت طراحی وب سایت در یزد Fetch as Googlebot وب سایت در یزد فروش لایسنس درمانگاه ها صفحه اول گوگل Google Robot Crack TeamViewer Enterprise 9.28 وبسایت برنامه نویسی ITVAN Firebug VIBER سئو TeamViewer 10 Ajax بی نهایت گوگل-goolge-طراحان سایت بهینه سازی موتور جستجو سئو و بهینه سازی W3C Validator مادام العمر آنتی ویروس 2014 بیلبورد در مازندران robots طراحی وب سایت بیلبورد بیلبورد در تهران ESET NOD32 Antivirus 7 شرکت طراحی وب یزد photo spheres ویندوز: XP-7-8 سه بعدی بیلبورد در شیراز ESET Remote Administrator Server Firefox اول شرکت طراحی یزد جستجو تصاویر در گوگل شبکه خصوصی ESET Remote Administrator Console پلانتی کاتالوگ نمونه کارها vpn سیستم مدیریت کارت شارژ نرم افزار حذف پسورد مدیران وب سایت شورای انفورماتیک کشور بهترین روش تبیلغات آتلیه Rank تبلیغات محیطی در یزد HTML5 boilerplate پنالتی گوگل وب سایت ها سایت اولین شرکت طراحی وب سایت در یزد cms بیلبورد در سمنان بیمارستان ها شرکت وب سایت یزد برنامه نویسی PHP ابر قدرت سیستم نوبت دهی پزشکان آموزش تصویری یزد فیلتر شکن 2015 طراحی سه بعدی ،فیلم برداری صنعتی نرم افزار ارسال انبوه تلگرام چک کردن تکنولوژی وب داینامک شاه کلید وب