کنترل ربات گوگل

1 1 1 1 1 1 1 1 1 1 رتبه 0.00 (0 رای)

   برای بعضی مدیران سایت ربات گوگل زیاد به سراغ سایت آن ها می آید.(و این باعث مصرف پهنای باند می شود). ولی برای بعضی ها خیلی دیر این کار را انجام می دهد. بعضی ها هم نگران این هستند که سایتشان توسط گوگل پیدا نشود و در نتایج قرار نگیرد.
  
در حال حاظر گوگل در بعضی مواقع سایت جدید شما را مرور می کند. و در زمانی که سایت شما به طور منظم بروز رسانی شود سریعتر به سایت شما سر میزند. ولی شما می توانید فعالیت ربات گوگل را کنترل کنید.

    برای این که بتوانید ربات گوگل را کنترل کنید می توانید ازrobots.txt استفاده کنید. این فایل با فرمتASCII که در شاخه روت سایت خود قرار می دهید. برای مثال، اگر آدرس شماhttp://www.domain.com است ، فایل باید در این مسیر قابل مشاهد باشد. http://www.domain.com/robots.txt ، شما می توانید از این فایل برای کنترل ایندکس تصاویر و غیره استفاده کنيد. شما می توانید با استفاده از این فایل یک یا چند شاخه را از دسترسی ربات ها محدود کنید. کافیست در خط اول نام ربات را وارد کرده و در خط بعد شاخه ها را وارد کنید.
  
این فایل نمونهrobots.txt تمامی ربات ها را برای دسترسی به شاخه تصاویر و کدPerl و ربات گوگل را از دسترسی به شاخه و آدرسcopyright مسدود می کند.

User-agent: *
Disallow: /images/
Disallow: /cgi-bin/
User-agent: Googlebot
Disallow: /copyright/
Disallow: /content/copyright-notice.html


   برای کنترل کردن میزان رجوع ربات های گوگل، باید در Google Webmaster Tools عضو شوید (که آموزش آن را در آینده به صورت مفصل خواهم داد) و در آن جا میزان مراجعه ربات گوگل را مشخص کنید.
  
باید این را مورد نظر داشته باشید که هیچ کدام از این متد ها ۱۰۰% نیستند. برای سوپاپ اطمینان می تونیم از کد های متا استفاده کنیم. مثلا با کد زیر به گوگل میگیم که این سایت را ایندکس نکند:
<meta name=“robots” content=“NOINDEX”>


توسط کد زیر به گوگل می فهمانیم که این سایت را دنبال نکن:
<meta name=“robots” content=“NOFOLLOW”>


   گوگل این ۲ متا را متوجه می شود ولی موتور های جستجوی دیگر این کار را امکان دارد انجام ندهند. برای همین بهترین گزینه همانrobots.txt است.

 

ارسال نظر


شرکت طراحی وب یزد عکاسی گوگل Rank شاه کلید وب مدیران وب سایت چک کردن فیلتر شکن وب سایت بیلبورد در مشهد seo سیستم نوبت دهی پزشکان پلانتی robots سئو پاناروما بیلبورد در کرج الگوریتم TeamViewer وب Crack TeamViewer Enterprise 9.28 شرکت طراحی و ب سایت در یزد بی نهایت Firebug جستجو تصاویر در گوگل وب مستر Ajax پنالتی گوگل Hotspot Shield Elite پیشرو پرداز بیلبورد در مازندران سئو و بهینه سازی گوگل پنگوئن حرفه ای بهترین روش الکسا XML کلینیک ها سیستم مدیریت محتوا بیتا اسکریپت گالری تصاویر شرکت طراحی وب سایت در یزد صفحه اول گوگل جستجوگر گوگل وب مستر گوگل پلی وایبر برنامه نویسی موبایل در یزد VIBER نمونه کارها Download Crack TeamViewer 9.28223 cms بیلبورد در سمنان بیلبورد در شیراز صفحات وب رایگان ویندوز: XP-7-8 طراحی وب سایت خرید بلیط اینترنتی پیامک رایگان بهینه سازی موتور جستجو TeamViewer 10 تصاویری ۳۶۰ درجه ای وب سایت ها معرفی سایت بهترین روش تبیلغات نمونه کار طراحی وب سایت طراحی jQuery UI وبسایت HTML5 boilerplate آتلیه اپلیکیشن رسمی عکاسی گوگل برتر مصطفی رضایی گوگل-goolge-طراحان سایت تکنولوژی وب شرکت وب سایت یزد فروش لایسنس TeamViewer Enterprise سیستم مدیریت اعلام نمرات مدارس سیستم مدیریت ایمیل ملی بیلبورد در یزد Firefox تفاوت نسخه رایگان و نسخه اصلی یزد سیستم مدیریت کارت شارژ تعرفه php Google Drawing Server Enterprise ITVAN طراحی ساده نرم افزار ارسال انبوه تلگرام الگوریتم های پاندا و پنگوئن شورای انفورماتیک کشور پرداخت آنلاین نوبت دهی نسخه کرک شده سیستم مدیریت سامانه پیامک پیشرو پرداز یزد اندروید تعرفه پانوراما تور مجازی 360 درجه سئوی سایت کاتالوگ آنلاین اسکریپت نوبت دهی پزشکان شبکه خصوصی وب سایت در یزد کرک vpn سه بعدی رتبه اول نقشه سایت HTML اخبار یزد بیلبورد در همدان بیلبورد در تهران ربات گوگل خبر یزد فیلتر شکن 2015 Fetch as Googlebot تبلیغات محیطی در یزد قیمت بیلبورد پزشک photo spheres TeamViewer Enterprise 9.0.27614 داینامک طراحی سه بعدی آنتی ویروس 2014 Dreamweaver نرم افزار حذف پسورد Code Anywhere درمانگاه ها روش تبلیغات پورتال کارت تخفیف آنی اد برنامه نویسی PHP اول شرکت طراحی یزد بمب گوگل ، پیج رنک وبمستر ESET Remote Administrator Server google bomb web اولین شرکت طراحی وب سایت در یزد حذف پسورد ویندوز بیمارستان ها دوربین مداربسته در یزد مادام العمر یاهو کاتالوگ هنری بهترین شرکت طراحی وب سایت Google Robot طراحی وب سایت پارانوما برنامه نویسی بسته تحت وب ،فیلم برداری صنعتی ESET NOD32 Antivirus 7 آموزش تصویری طراحی وب یزد سیستم فروشگاه ساز تصاویر بندانگشتی نامحدود You probably tried to upload too large file تصاویر 360 درجه ESET Remote Administrator Console W3C Validator ابر قدرت نمایش تصاویر