Il existe des sites Web qui empêchent les robots d'exploration de les visiter, et ces sites Web seront exclus de l'index.
Enwere weebụsaịtị ndị na-akwụsị ndị crawler ịga leta ha, a ga-ahapụ weebụsaịtị ndị ahụ na ndeksi ahụ.