robots.txt generátor
Vyber, kteří search engine boti smí a nesmí indexovat, jestli povolíš AI training (ChatGPT, Claude, Google AI), které cesty zakázat, a kde najít sitemap. Output je platný <code>robots.txt</code>.
Search engine bots
AI training bots
Pokud nechceš, aby tvůj obsah byl trénovacími daty pro LLM, zakaž je.
Zakázat paths
Cesty, které nesmí být indexované (admin, čekací stránky, atd.). Jedna na řádek.
Sitemap URL
robots.txt