llms.txt vs robots.txt vs sitemap.xml: który plik za co odpowiada w Google i AI?
Udostępniamy darmowy generator llms.txt, dlatego otwarcie piszemy, że sam plik llms.txt nie poprawia pozycji w Google i nie zastępuje robots.txt ani mapy strony.
Dane: RFC 9309 (robots.txt), sitemaps.org, llmstxt.org (v2), Google Search Central, OpenAI Docs, analiza Ahrefs (137 000 domen) oraz nasz test 119 żądań HTTP (5.11.2026).
Krótka odpowiedź
Te trzy pliki pełnią zupełnie różne funkcje i nie zastępują się nawzajem. Plik robots.txt mówi robotom wyszukiwarek i AI, których ścieżek nie wolno pobierać; sitemap.xml zgłasza kanoniczne adresy URL i daty aktualizacji do indeksacji w Google i Bing; natomiast llms.txt to nieobowiązkowa propozycja spisu najważniejszych podstron w formacie Markdown, której wyszukiwarka Google oficjalnie nie używa.
robots.txt, sitemap.xml i llms.txt: porównanie w 8 punktach
Wokół pliku llms.txt narosło wiele mitów - łącznie z twierdzeniem, że to „nowy robots.txt dla sztucznej inteligencji”. Tabela pokazuje stan faktyczny wynikający ze specyfikacji i dokumentacji dostawców wyszukiwarek oraz modeli.
Porównanie plików robots.txt, sitemap.xml i llms.txt w 8 kryteriach (stan: listopad 2026)
| Kryterium | robots.txt | sitemap.xml | llms.txt |
|---|---|---|---|
| Główna funkcja techniczna | Zezwala lub zabrania botom pobierania wskazanych ścieżek serwisu | Lista kanonicznych adresów URL przeznaczonych do zaindeksowania z datą modyfikacji | Zwięzły spis najważniejszych podstron z opisami dla modeli językowych i asystentów |
| Format i lokalizacja | Zwykły tekst (RFC 9309), zawsze w katalogu głównym /robots.txt | XML (protokół sitemaps.org), np. /sitemap.xml zgłaszany w GSC i BWT | Markdown (propozycja v2 z llmstxt.org), /llms.txt lub podkatalog np. /docs/llms.txt |
| Czy wyszukiwarka Google z niego korzysta? | Tak - fundament kontroli crawlowania Googlebota i Google-Extended | Tak - podstawowe źródło odkrywania URL-i i sygnał daty zmian | Nie - Google Search Central potwierdza, że wyszukiwarka nie używa llms.txt |
| Wpływ na ChatGPT, Perplexity i Claude | Kluczowy: blokada OAI-SearchBot lub PerplexityBot wyklucza stronę z odpowiedzi wyszukiwania | Pośredni, ale silny: zasila indeksy Google i Bing (wraz z IndexNow), z których czerpią modele | Pomocniczy dla narzędzi programistycznych i agentów; brak potwierdzenia wpływu na ranking w ChatGPT |
| Czy potrafi zablokować dostęp lub wyindeksować stronę? | Blokuje pobieranie przez boty indeksujące/trenujące (do wyindeksowania z Google służy meta noindex) | Nie blokuje niczego | Nie ma żadnej mocy blokowania botów |
| Skala wdrożeń i standard | Standard branżowy od 1994 r. (RFC 9309 z 2022 r.) | Standard wspierany przez Google, Bing i inne wyszukiwarki od 2005 r. | Wczesna propozycja: obecna na ok. 28% ze 137 000 zbadanych większych domen (analiza Ahrefs) |
| Najgroźniejszy błąd wdrożeniowy | Przypadkowe Disallow: / albo blokada OAI-SearchBot przy chęci obecności w ChatGPT | Umieszczanie w mapie stron z błędem 404, przekierowaniem 301 albo tagiem noindex | Wierzenie, że samo wgranie llms.txt naprawi zablokowany robots.txt lub brak treści w HTML |
| Kolejność wdrożenia na stronie firmowej | 1. obowiązkowo na starcie | 2. obowiązkowo na starcie + zgłoszenie w GSC i Bing Webmaster Tools | 3. opcjonalny dodatek (kilka minut pracy po uporządkowaniu pierwszych dwóch) |
Źródła: RFC 9309, Google Search Central (robots.txt, sitemaps, AI features), OpenAI Crawler Docs, llmstxt.org v2 oraz Ahrefs (analiza 137 000 domen, odczyt 5.11.2026).
Co pokazał nasz test 119 żądań HTTP dla 17 User-Agentów (5.11.2026)
Budując diagnostykę dostępu robotów AI, 5 listopada 2026 przetestowaliśmy na żywo 7 produkcyjnych stron, wysyłając do każdej zapytania z 17 różnymi nagłówkami User-Agent (łącznie 119 żądań HTTP, w tym OAI-SearchBot, GPTBot, ChatGPT-User, PerplexityBot, ClaudeBot, Google-Extended i Bingbot). Dwa wnioski praktyczne są ważniejsze niż sama edycja plików tekstowych:
- Zapory WAF/CDN potrafią wyciąć boty AI mimo otwartego
robots.txt: niektóre konfiguracje serwerowe przepuszczają zwykłą przeglądarkę i Googlebota, ale zwracają kod403lub stronę z wyzwaniem bezpieczeństwa dla botów AI. Sam odczyt plikurobots.txttego nie wykryje. - Rozdzielenie treningu od wyszukiwania odbywa się wyłącznie w
robots.txt: w ekosystemie OpenAI możesz zablokowaćGPTBot(zbieranie danych treningowych) i jednocześnie zostawić otwartyOAI-SearchBot(indeksowanie pod wyszukiwarkę ChatGPT). Plikllms.txtnie obsługuje takich reguł.
Dostęp 9 botów AI i Bingbota w swoim robots.txt oraz gotowy szkic pliku Markdown wygenerujesz bez rejestracji w naszym darmowym generatorze llms.txt.
Z kolei błędy 404 i przekierowania zaszyte w sitemap.xml automatycznie wyłapuje nasz darmowy audyt SEO.
Praktyczny zestaw dla firmy usługowej lub B2B w 3 krokach
- Uporządkuj
/robots.txt: zostaw pełny dostęp do stron ofertowych, poradników, obrazów i arkuszy stylów dlaGooglebot,Bingbot,OAI-SearchBot,PerplexityBotiClaude-SearchBot; na dole wskaż pełny adresSitemap: https://twojadomena.pl/sitemap.xml. - Oczyść
/sitemap.xml: zostaw w niej wyłącznie adresy zwracające kod200, z self-referencing canonicalem i bez dyrektywynoindex, a następnie zgłoś mapę w Google Search Console i Bing Webmaster Tools. - Dodaj zwięzły
/llms.txtjako uporządkowany spis: wypisz w nim nazwę firmy, jednozdaniowy opis działalności oraz pogrupowane linki do kluczowych usług, cennika i dokumentacji z krótkim opisem przy każdym łączu.