کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


بهینه سازی موتور جستجو بهترین روش ویندوز: XP-7-8 آنی اد HTML5 boilerplate مدیران وب سایت رتبه اول Download Crack TeamViewer 9.28223 هنری دوربین مداربسته در یزد ESET NOD32 Antivirus 7 سیستم مدیریت محتوا بیتا جستجو تصاویر در گوگل پیج رنک بهترین شرکت طراحی وب سایت یزد Google Drawing آتلیه درمانگاه ها پلانتی Firefox Hotspot Shield Elite تصاویری ۳۶۰ درجه ای اسکریپت گالری تصاویر الگوریتم TeamViewer Fetch as Googlebot بیلبورد در کرج آنتی ویروس 2014 الگوریتم های پاندا و پنگوئن وبمستر پنالتی گوگل سیستم نوبت دهی پزشکان vpn ESET Remote Administrator Server سیستم مدیریت اعلام نمرات مدارس بیلبورد در تهران شرکت طراحی و ب سایت در یزد سئو robots نرم افزار ارسال انبوه تلگرام google bomb Dreamweaver تبلیغات محیطی در یزد مادام العمر رایگان طراحی پیشرو پرداز یزد پورتال کارت تخفیف صفحات وب حرفه ای سایت cms HTML برنامه نویسی ربات گوگل وب سایت در یزد نمونه کار طراحی وب سایت ESET Remote Administrator Console سئو و بهینه سازی سئوی سایت گوگل پلی Ajax jQuery UI XML seo خرید بلیط اینترنتی سیستم مدیریت سامانه پیامک TeamViewer 10 شرکت وب سایت یزد بیلبورد گوگل-goolge-طراحان سایت برتر فیلتر شکن شرکت طراحی وب یزد روش تبلیغات ابر قدرت گوگل وب مستر وب سایت وب سایت ها php تعرفه شورای انفورماتیک کشور تحت وب صفحه اول گوگل بیلبورد در مازندران بیلبورد در مشهد کاتالوگ آنلاین پیامک رایگان نسخه کرک شده طراحی ساده کرک بمب گوگل ، داینامک تکنولوژی وب تعرفه پانوراما تور مجازی 360 درجه طراحی وب شبکه خصوصی آموزش تصویری ITVAN تصاویر 360 درجه کلینیک ها بهترین روش تبیلغات Rank برنامه نویسی PHP پرداخت آنلاین سیستم فروشگاه ساز اپلیکیشن رسمی عکاسی گوگل web بیمارستان ها عکاسی گوگل پزشک VIBER معرفی سایت photo spheres نامحدود طراحی وب یزد نوبت دهی الکسا وایبر تفاوت نسخه رایگان و نسخه اصلی اولین شرکت طراحی وب سایت در یزد مصطفی رضایی Code Anywhere بیلبورد در سمنان وبسایت نرم افزار حذف پسورد شاه کلید وب پاناروما اندروید سیستم مدیریت کارت شارژ پارانوما Crack TeamViewer Enterprise 9.28 حذف پسورد ویندوز Server Enterprise فیلتر شکن 2015 یاهو Google Robot تصاویر بندانگشتی بسته طراحی وب سایت بیلبورد در شیراز نمایش تصاویر سه بعدی کاتالوگ بی نهایت جستجوگر خبر یزد قیمت اخبار یزد نمونه کارها TeamViewer Enterprise Firebug اسکریپت نوبت دهی پزشکان گوگل پنگوئن سیستم مدیریت ایمیل ملی بیلبورد در یزد نقشه سایت TeamViewer Enterprise 9.0.27614 W3C Validator فروش لایسنس شرکت طراحی وب سایت در یزد چک کردن برنامه نویسی موبایل در یزد You probably tried to upload too large file وب مستر طراحی سه بعدی بیلبورد در همدان وب پیشرو پرداز اول شرکت طراحی یزد ،فیلم برداری صنعتی