کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


شبکه خصوصی Hotspot Shield Elite بسته برتر وب سایت وب مستر پرداخت آنلاین نرم افزار ارسال انبوه تلگرام رتبه اول تعرفه پانوراما تور مجازی 360 درجه وب سایت ها TeamViewer Enterprise سیستم نوبت دهی پزشکان اخبار یزد TeamViewer پاناروما صفحات وب الگوریتم های پاندا و پنگوئن Server Enterprise یزد google bomb تعرفه سئو VIBER مادام العمر وبمستر شورای انفورماتیک کشور اولین شرکت طراحی وب سایت در یزد حذف پسورد ویندوز ،فیلم برداری صنعتی HTML5 boilerplate بیلبورد در همدان طراحی طراحی وب سایت vpn درمانگاه ها تبلیغات محیطی در یزد Google Drawing شرکت طراحی و ب سایت در یزد برنامه نویسی XML برنامه نویسی موبایل در یزد تکنولوژی وب وب ESET Remote Administrator Console شاه کلید وب بیلبورد در تهران نرم افزار حذف پسورد نوبت دهی TeamViewer Enterprise 9.0.27614 آتلیه وبسایت Firebug Dreamweaver گوگل وب مستر شرکت وب سایت یزد مدیران وب سایت صفحه اول گوگل نقشه سایت سیستم مدیریت ایمیل ملی بهینه سازی موتور جستجو پارانوما بیلبورد در کرج سیستم مدیریت محتوا بیتا وب سایت در یزد پزشک نامحدود Firefox سایت نمونه کار طراحی وب سایت حرفه ای تفاوت نسخه رایگان و نسخه اصلی کاتالوگ آنلاین نمایش تصاویر ربات گوگل بهترین روش تبیلغات بیلبورد در مشهد پلانتی Rank robots کرک طراحی وب تصاویر 360 درجه ESET Remote Administrator Server رایگان TeamViewer 10 سیستم مدیریت سامانه پیامک یاهو پیامک رایگان جستجوگر ویندوز: XP-7-8 Code Anywhere بیلبورد در سمنان گوگل پلی Ajax سئوی سایت ESET NOD32 Antivirus 7 ITVAN طراحی سه بعدی php نسخه کرک شده خبر یزد jQuery UI چک کردن تصاویر بندانگشتی پورتال کارت تخفیف سئو و بهینه سازی جستجو تصاویر در گوگل شرکت طراحی وب سایت در یزد Google Robot آموزش تصویری HTML Download Crack TeamViewer 9.28223 الگوریتم فیلتر شکن سیستم مدیریت اعلام نمرات مدارس بیلبورد در یزد web فروش لایسنس اندروید آنی اد معرفی سایت seo اپلیکیشن رسمی عکاسی گوگل گوگل-goolge-طراحان سایت Crack TeamViewer Enterprise 9.28 بیلبورد در شیراز بی نهایت نمونه کارها cms بیلبورد روش تبلیغات داینامک گوگل پنگوئن سه بعدی بهترین شرکت طراحی وب سایت پیج رنک هنری دوربین مداربسته در یزد اسکریپت گالری تصاویر سیستم مدیریت کارت شارژ photo spheres شرکت طراحی وب یزد اسکریپت نوبت دهی پزشکان سیستم فروشگاه ساز تصاویری ۳۶۰ درجه ای بیلبورد در مازندران برنامه نویسی PHP فیلتر شکن 2015 مصطفی رضایی قیمت عکاسی گوگل Fetch as Googlebot وایبر ابر قدرت W3C Validator بهترین روش آنتی ویروس 2014 کاتالوگ پیشرو پرداز یزد تحت وب الکسا پیشرو پرداز You probably tried to upload too large file طراحی وب یزد اول شرکت طراحی یزد بمب گوگل ، خرید بلیط اینترنتی طراحی ساده بیمارستان ها کلینیک ها پنالتی گوگل