Generator robots.txt
Utwórz plik robots.txt: agenci, uprawnienia, mapa witryny.
- Natychmiast
- Za darmo
- Prywatnie (przetwarzane lokalnie)
- Bez rejestracji
Kieruj botami, bez błędu składni
Źle napisany robots.txt może przypadkiem zablokować całą witrynę. To narzędzie składa poprawny plik z Twoich wyborów: presety CMS, ścieżki do wykluczenia, mapa witryny. Zachowujesz kontrolę, bez ryzyka literówki.
-
Wybierz preset
Zezwól na wszystko, zablokuj wszystko lub CMS (WordPress, Shopify, Joomla).
-
Dopracuj reguły
User-agent, zabronione ścieżki, opóźnienie indeksowania, mapa witryny.
-
Umieść plik
Skopiuj wynik do pliku robots.txt w katalogu głównym witryny.
Kluczowe dyrektywy
| Dyrektywa | Efekt |
|---|---|
| User-agent: * | Dotyczy wszystkich botów |
| Disallow: /admin/ | Zabrania indeksowania /admin/ |
| Disallow: | Niczego nie zabrania (wszystko dozwolone) |
| Sitemap: … | Wskazuje adres URL mapy witryny |
Wszystko jest generowane lokalnie, w przeglądarce. Zawsze sprawdź plik w Search Console przed publikacją na witrynie produkcyjnej.
Najczęstsze pytania
Do czego służy plik robots.txt?
Umieszczony w katalogu głównym witryny (https://przyklad.com/robots.txt) mówi robotom wyszukiwarek, które części przeszukiwać, a których unikać. To umowa grzecznościowa: kulturalne boty jej przestrzegają, ale technicznie nie blokuje dostępu.
Czy zablokowanie strony wystarczy, by ukryć ją przed Google?
Nie. „Disallow” blokuje indeksowanie ruchu (crawl), nie indeksację: zablokowana strona może nadal pojawiać się w wynikach, jeśli inne witryny do niej linkują. By naprawdę ją wykluczyć, użyj meta tagu „noindex” lub ochrony hasłem.
Co oznacza puste „Disallow:”?
Wiersz „Disallow:” bez wartości zezwala na wszystko: bot może przeszukać całą witrynę. Odwrotnie, „Disallow: /” blokuje wszystko. To różnica między „nic nie zabronione” a „wszystko zabronione”.
Czy podawać tu mapę witryny?
Jest to zalecane: wiersz „Sitemap:” daje wyszukiwarkom adres URL Twojej mapy witryny, co przyspiesza odkrywanie stron. Użyj pełnego, bezwzględnego adresu URL, np. https://przyklad.com/sitemap.xml.