Domyślnie WordPress automatycznie tworzy plik robots.txt dla każdej strony. Ale są pewne niuanse. Po pierwsze, użytkownik nie wie, gdzie znajduje się robots.txt w WordPressie. Po drugie, nie będzie mógł go edytować.
Standardowy plik mało komu odpowiada pod względem ustawień, dlatego należy go koniecznie edytować, wskazując, które katalogi należy zamknąć przed indeksowaniem, a które pozostawić dostępne dla wyszukiwarek. I w tym celu trzeba wiedzieć wszystko o pliku robots.txt w WordPressie: gdzie go znaleźć, jak go skonfigurować itd. Przyjrzyjmy się tej kwestii bliżej.
Sprawdzamy obecność pliku robots.txt
Zatem system WordPress automatycznie tworzy wirtualny plik robots.txt. Ale są wyjątki. I zanim go poszukasz, musisz upewnić się, że on istnieje.
Najprostszym sposobem, aby to sprawdzić, jest dopisanie do adresu strony ciągu /robots.txt. Powinno to wyglądać mniej więcej tak:
https://wordpress-school.com.ua/robots.txt
Jeśli ten plik istnieje, otworzy się nowa strona z mniej więcej takim zawartością:
W pliku robots.txt znajduje się kilka linii, dlatego uznaje się go za niepoprawny. Należy go zmienić, szczegółowo wskazując, co można indeksować, a co – nie. Jednak wirtualny plik nie może być edytowany, należy stworzyć jego fizyczną wersję na hostingu.
Oczywiście, wcześniej trzeba zrozumieć, gdzie na stronie na WordPressie leży plik robots.txt, ponieważ nowy plik powinien znajdować się tam, gdzie poprzedni. W przeciwnym razie wyszukiwarki go nie znajdą i uznają, że po prostu nie istnieje (co jest uznawane za krytyczny błąd przy promocji strony).
Gdzie znaleźć i jak pracować z plikiem robots.txt?
Plik robots.txt znajduje się w głównym katalogu strony. Można go otworzyć na różne sposoby.
Pierwszy – przez panel sterowania hostingiem. W tym przypadku należy przejść ścieżką: www/adres_strony.
- wp-admin;
- wp-content;
- wp-includes.
A poniżej znajdują się różne pliki, w tym robots.txt.
Drugi sposób – za pomocą klienta FTP, zainstalowanego na komputerze. Na przykład, przez program Filezilla.
- logujesz się na hosting za pomocą Filezilla;
- otwierasz foldery www/adres_strony;
- znajdujesz plik robots.txt.
Zaznaczając go i klikając prawym przyciskiem myszy, możesz go edytować. Lub stworzyć nowy, jeśli plik jest nieobecny.
Trzeci sposób – za pomocą specjalnych wtyczek WordPress (Yoast SEO lub All in One SEO).
Wykonują one wiele przydatnych funkcji, w tym potrafią tworzyć plik robots.txt dla strony na WordPressie. Ta opcja jest bardzo prosta i doskonale nadaje się dla początkujących użytkowników. Wystarczy zainstalować odpowiednią wtyczkę i edytować zawartość pliku robots.txt strony na WordPressie.
Nie trzeba wchodzić do panelu sterowania hostingu ani instalować na komputerze klienta FTP. Dodatkowo nie trzeba się martwić, gdzie szukać pliku w WordPressie (wtyczka SEO sama stworzy plik w odpowiednim miejscu i zapisze zmiany).
I ostatnia opcja – skonsultować się z menedżerami firmy, u której zamawiano hosting strony.
To już ostateczna miara, która pomoże tym, którzy zupełnie nie wiedzą, jak wejść do panelu sterowania lub zainstalować wtyczkę SEO. Menedżerowie pomogą zrozumieć tę kwestię i szczegółowo wyjaśnią, gdzie znaleźć i jak prawidłowo skonfigurować plik robots.txt dla twojej strony.
Przeczytaj także: Jak stworzyć sklep internetowy na WordPressie?
Podobał Ci się artykuł? Powiedz o nim znajomym: 
