Plik robots.txt pełni szczególnie istotną rolę, jeśli chodzi o pozycjonowanie. To właśnie w nim znajdują się zakresy dopuszczalności wertowania naszej witryny przez roboty wyszukiwarek (user–agents). Zobacz, jak można optymalnie ustawić plik robots.txt poniżej.