For more information about the robots.text file and the Robots Exclusion standard, see the Web Robots Pages.
Za več informacij o datoteki robots.txt in standardih izključevanja robotov glejte Strani o spletnih robotih.