Generator robots.txt
Przygotuj plik robots.txt dla własnej witryny.
Przejdź do narzędziaPrzygotuj plik robots.txt dla własnej witryny. Wskaż roboty, dodaj wybrane reguły dostępu i opcjonalne mapy strony. Generator pokazuje cały wynik przed pobraniem.
Spis treści
Podgląd robots.txt
Brak gotowego wyniku
Ustaw parametry i użyj przycisku narzędzia.
Jak działa narzędzie
- Wpisz * dla wszystkich robotów lub nazwy robotów, po jednej w wierszu. Wszystkie podane nazwy należą do jednej grupy i otrzymają te same reguły.
- Dodaj regułę Disallow, aby ograniczyć pobieranie ścieżki, albo Allow, aby wskazać dozwoloną ścieżkę.
- Opcjonalnie podaj pełne adresy map strony.
- Wygeneruj podgląd i przeczytaj komunikaty. Pobierz plik robots.txt.
- Po sprawdzeniu umieść go w katalogu głównym właściwego hosta, pod adresem /robots.txt. Sprawdź odpowiedź HTTP i reguły w narzędziach swojej wyszukiwarki.
Szczegóły techniczne
Plik zawiera tylko wybrane wpisy User-agent, Allow, Disallow i Sitemap. Generator nie dodaje sam reguł dla panelu administracyjnego, zasobów CSS ani robotów AI. Obsługuje jedną grupę robotów z maksymalnie 100 regułami i 20 mapami strony.
Ścieżka zaczyna się od /. Wielkość liter w ścieżkach ma znaczenie. Gwiazdka * oznacza dopasowanie dowolnego ciągu, a $ koniec adresu. Spacje i znak # w samym adresie należy zakodować, np. jako %20 i %23. Sprawdzamy podstawową składnię danych wejściowych, bez pobierania wskazanej witryny.
FAQ
Czy robots.txt usuwa stronę z Google?
Nie gwarantuje tego. Reguły ograniczają pobieranie. Sposób wyłączenia strony z indeksu dobierz do sytuacji; robot musi móc pobrać stronę, aby zobaczyć noindex.
Co oznacza pusta lista reguł?
Wygenerowana grupa zawiera jedynie nazwy robotów i nie ogranicza pobierania. Generator nie dopisuje zakazów za użytkownika.
Czy mogę podać kilka robotów?
Tak, do 20 nazw po jednej w wierszu. Ta wersja tworzy jedną grupę, więc wszystkie wymienione roboty dostaną te same reguły.
Czy mogę dodać Crawl-delay lub Noindex?
Ta wersja generuje User-agent, Allow, Disallow i Sitemap. Nie dodaje niestandardowych dyrektyw, których obsługa zależy od robota.
Ograniczenia narzędzia
Robots.txt reguluje pobieranie, a nie stanowi gwarancji usunięcia strony z indeksu. Adres zablokowany dla robota może nadal pojawić się w wynikach wyszukiwania. Aby robot mógł odczytać dyrektywę noindex na stronie, musi mieć możliwość jej pobrania.
Plik jest publiczny i nie chroni poufnych danych. Ochronę dostępu zapewnia uwierzytelnienie i konfiguracja serwera. Disallow: / może zablokować pobieranie całej witryny przez wskazane roboty. Generator niczego nie wdraża automatycznie i nie sprawdza skutków reguł w konkretnej wyszukiwarce.
Źródła i aktualizacja
- IETF RFC 9309 — Robots Exclusion Protocol — sprawdzono 18.09.2026.
- Google — interpretacja robots.txt — sprawdzono 18.09.2026.
- Google — pobieranie i indeksowanie — sprawdzono 18.09.2026.