کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


بیلبورد در سمنان Rank پیشرو پرداز ESET Remote Administrator Server مادام العمر HTML HTML5 boilerplate seo بیلبورد در کرج پارانوما وبمستر برنامه نویسی ESET NOD32 Antivirus 7 jQuery UI بی نهایت web TeamViewer 10 مدیران وب سایت وب سایت گوگل پنگوئن بهترین شرکت طراحی وب سایت تبلیغات محیطی در یزد فیلتر شکن جستجو تصاویر در گوگل بهینه سازی موتور جستجو عکاسی گوگل حذف پسورد ویندوز robots وب مستر بیلبورد در مازندران بیلبورد در تهران برتر اپلیکیشن رسمی عکاسی گوگل نمونه کار طراحی وب سایت داینامک تصاویر بندانگشتی ابر قدرت سیستم مدیریت اعلام نمرات مدارس TeamViewer Fetch as Googlebot پاناروما ربات گوگل سئو و بهینه سازی TeamViewer Enterprise بیلبورد در مشهد آنتی ویروس 2014 cms photo spheres شرکت طراحی وب یزد ویندوز: XP-7-8 سیستم فروشگاه ساز سئو الکسا وب الگوریتم ITVAN طراحی تحت وب رتبه اول سئوی سایت گوگل وب مستر بیمارستان ها کرک چک کردن php اسکریپت گالری تصاویر سیستم مدیریت سامانه پیامک نمایش تصاویر طراحی وب یزد رایگان بسته طراحی سه بعدی شرکت وب سایت یزد W3C Validator قیمت صفحه اول گوگل آنی اد برنامه نویسی PHP بیلبورد در همدان بیلبورد در یزد روش تبلیغات کلینیک ها Code Anywhere کاتالوگ اسکریپت نوبت دهی پزشکان وایبر Firebug پنالتی گوگل نامحدود شاه کلید وب پلانتی یاهو Dreamweaver ESET Remote Administrator Console یزد خرید بلیط اینترنتی Firefox TeamViewer Enterprise 9.0.27614 Google Robot وب سایت ها تعرفه پانوراما تور مجازی 360 درجه Hotspot Shield Elite هنری تصاویری ۳۶۰ درجه ای نسخه کرک شده نرم افزار ارسال انبوه تلگرام پیامک رایگان بهترین روش تبیلغات تعرفه Ajax طراحی وب سایت نوبت دهی google bomb گوگل-goolge-طراحان سایت Google Drawing اولین شرکت طراحی وب سایت در یزد پیشرو پرداز یزد مصطفی رضایی XML فروش لایسنس vpn سیستم مدیریت محتوا بیتا تصاویر 360 درجه Server Enterprise اندروید تفاوت نسخه رایگان و نسخه اصلی نرم افزار حذف پسورد برنامه نویسی موبایل در یزد اول شرکت طراحی یزد پزشک کاتالوگ آنلاین طراحی ساده سیستم نوبت دهی پزشکان اخبار یزد تکنولوژی وب Crack TeamViewer Enterprise 9.28 شرکت طراحی و ب سایت در یزد بهترین روش دوربین مداربسته در یزد نمونه کارها حرفه ای بیلبورد پیج رنک بیلبورد در شیراز وب سایت در یزد VIBER خبر یزد بمب گوگل ، Download Crack TeamViewer 9.28223 شبکه خصوصی پورتال کارت تخفیف شورای انفورماتیک کشور سیستم مدیریت کارت شارژ فیلتر شکن 2015 معرفی سایت سایت سیستم مدیریت ایمیل ملی طراحی وب جستجوگر نقشه سایت درمانگاه ها وبسایت پرداخت آنلاین شرکت طراحی وب سایت در یزد گوگل پلی آتلیه الگوریتم های پاندا و پنگوئن You probably tried to upload too large file ،فیلم برداری صنعتی سه بعدی آموزش تصویری صفحات وب