Un fichier robots.txt est un fichier d'autorisations de base qui indique au robot / araignée / robot de moteur de recherche les répertoires à ignorer et les répertoires à explorer.
A robots.txt faịlụ bụ isi ikike faịlụ na-agwa a search engine bot / ududo / crawler ihe directories na-eleghara na ihe directories iri ari.