bakarak değhizmetikliğe uğrayarak ne taksimmlerin saklanması icap ettiğini gösterir. Kent sahipleri bazı zamanlar sitenin bazı taksimmlerine arama motorlarının erişimlerini istemezler. Bilinmiş olduğu üzere tüm arama motorları sitelere belirli botlar ile giriş yaparak sitelerin hapishaneğine algoritmik