Test robotów AI

Wpisz adres URL. Odczytamy robots.txt i llms.txt i pokażemy, czy każdy robot AI ma dostęp.

Dlaczego roboty AI są ważne

ChatGPT, Perplexity i Google AI Overviews mogą Cię cytować tylko wtedy, gdy ich roboty mogą czytać Twoje strony. Wiele serwisów blokuje je nieświadomie: przez starą wtyczkę bezpieczeństwa, ustawienie CDN albo regułę dodaną kiedyś przeciwko „scraperom”.

Trenowanie a wyszukiwanie

Nie każdy robot ma to samo zadanie. GPTBot i Google-Extended zbierają dane do trenowania; OAI-SearchBot, PerplexityBot i Claude-SearchBot pobierają strony, by odpowiadać na pytania na bieżąco. Jeśli wpuścisz tylko roboty wyszukiwania, nadal możesz być cytowany bez udziału w trenowaniu.

Jak wpuścić robota

Dodaj w robots.txt blok z „User-agent:”, nazwą robota i „Allow: /”. Potem sprawdź też firewall lub CDN: od 2025 roku Cloudflare domyślnie blokuje boty AI na nowych domenach.

Czym jest llms.txt?

llms.txt to prosty plik tekstowy w katalogu głównym strony, który wyjaśnia modelom językowym, czym się zajmujesz i które strony są najważniejsze. To nie jest oficjalny standard, ale przygotujesz go w kilka minut, a pomaga systemom AI szybciej zrozumieć Twoją stronę.

Najczęstsze pytania