Konfigurowanie pliku robots.txt w WordPress
Plik robots.txt jest tworzony głównie przez twórców stron internetowych oraz pozycjonerów (jego obecność jest weryfikowana np. podczas audytu SEO) w celu ograniczania dostępu robotom wyszukiwarek internetowych (np. Google, Yahoo, Bing ).