Darmowy generator nazw firm. Jak wymyślić nazwę firmy?
3 miesiące ago
🤖 Darmowe narzędzie
Tester robots.txt
Sprawdź czy bot ma dostęp do Twojego URL
— Wybierz bota —
1
Wynik testu
Możliwości
Co sprawdzisz tym narzędziem?
Kompleksowe testowanie pliku robots.txt dla wszystkich typów crawlerów
Wyszukiwarki
Googlebot, Bingbot, Yandex, Baidu, DuckDuckGo oraz wszystkie warianty mobilne.
Crawlery AI
GPTBot, ClaudeBot, PerplexityBot, CCBot i ponad 30 innych botów AI.
Boty reklamowe
AdsBot-Google, Mediapartners, AdIdxBot – systemy reklamowe.
Social Media
Facebook, Twitter, LinkedIn – podglądy linków.
Narzędzia SEO
Screaming Frog, Ahrefs, Moz, Majestic i inne crawlery SEO.
Precyzyjne wyniki
Która reguła blokuje dostęp wraz z numerem linii.
Jak to działa?
1
Wklej robots.txt
Skopiuj zawartość pliku robots.txt ze swojego serwera i wklej w edytor.
2
Podaj URL i wybierz bota
Wpisz pełny adres URL i wybierz interesującego Cię bota z listy.
3
Sprawdź wynik
Zobaczysz czy bot ma dostęp i która reguła za to odpowiada.
Najczęstsze pytania
Czym jest plik robots.txt?
To plik tekstowy w głównym katalogu strony, który informuje boty które strony mogą indeksować.
Jak zablokować boty AI?
Dodaj reguły User-agent: GPTBot, ClaudeBot, CCBot z dyrektywą Disallow: /
Co oznacza User-agent: *?
Gwiazdka oznacza wszystkie boty – reguły dotyczą każdego crawlera bez specyficznych reguł.
Czy narzędzie jest darmowe?
Tak, tester robots.txt jest całkowicie bezpłatny i nie wymaga rejestracji.
Tester robots.txt online
Nasz darmowy tester robots.txt pozwala sprawdzić, czy crawlery wyszukiwarek i botów AI mają dostęp do Twoich stron.
Dlaczego warto testować robots.txt?
Plik robots.txt to kluczowy element każdej strony. Nieprawidłowo skonfigurowany może:
- Zablokować Googlebot i uniemożliwić indeksowanie
- Pozwolić botom AI na pobieranie treści
- Blokować podglądy linków w social media
Obsługiwane crawlery
Tester zawiera ponad 80 user-agentów: Google, Bing, AI Crawlers, SEO Tools, Social Media.
