Network
llms.txt / KI-Crawler-Audit-Generator
Erzeugt eine llms.txt (llmstxt.org-v2-Format: H1, Kurzfassung als Zitat, H2-Dateilisten) aus einem Live-Crawl oder eingefügtem Seiteninventar und auditiert die robots.txt-Politik für GPTBot, ClaudeBot, PerplexityBot und Bytespider nach dem RFC-9309-Algorithmus — mit Allow/Block-Vorschau und zum Einfügen fertigen Direktiven.
Schnellstart
Rufen Sie dieses Werkzeug aus Ihrem Code in drei Sprachen auf.
curl -X POST 'https://api.elysiatools.com/de/api/tools/llms-txt-and-ai-crawler-audit' \
-H 'Content-Type: application/json' \
-d '{"siteUrl":"https://example.com — homepage links, plus sitemap.xml fallback for JS-rendered sites (max 25 pages)","pagesInput":"\nhttps://example.com/docs/quickstart | Quickstart | Install the CLI and run your first job\nhttps://example.com/docs/api | API Reference | Endpoint catalog with auth examples\nhttps://example.com/blog/cli-tips | CLI Tips | Twenty shortcuts for daily use\nhttps://example.com/blog/release-2026 | Release 2026 | What changed this quarter","robotsInput":"User-agent: GPTBot\nDisallow: /\n\nUser-agent: ClaudeBot\nDisallow:\n\nUser-agent: *\nDisallow: /private/","siteName":"Example Platform Docs","summary":"Example Platform lets teams ship scheduled data jobs without infrastructure.","extraNotes":"All endpoints require an API key; the quickstart covers sandbox setup.","grouping":"auto"}'