به طور کلی دسترسی موتورهای جستجوگر را به صفحه‌هایی که ارزش محتوایی چندانی ندارند قطع کنید. به عنوان مثال یکی از فایل‌هایی که باید دسترسی موتورهای جستجوگر را به وسیله آن ببندید تبلیغات روی وب‌سایت شماست که می‌تواند اثر منفی روی رتبه شما بگذارد.