# robots.txt for CreatorDesk # https://creatordesk.de User-agent: * Allow: / Allow: /shop/ Allow: /ratgeber/ Allow: /preise/ Allow: /faq/ Allow: /funktionen/ Allow: /kontakt/ Allow: /unsere-geschichte/ Allow: /impressum/ Allow: /datenschutz/ Allow: /agb/ Allow: /fotografen/ Allow: /en/ Allow: /es/ Allow: /fr/ Allow: /it/ Allow: /nl/ Disallow: /dashboard/ Disallow: /accounts/ Disallow: /checkout/ Disallow: /admin/ Disallow: /crm/ Allow: /media/branding/ Allow: /media/logos/ Allow: /media/products/ Allow: /media/media_library/ Allow: /media/dealers/ Allow: /media/feed_planner/ Allow: /media/landing_pages/ Allow: /media/avatars/ Disallow: /media/ Disallow: /login/ Disallow: /register/ Disallow: /c/ Disallow: /f/ Disallow: /meet/ Disallow: /2fa/ Disallow: /passkeys/ # Sprachpraefix-Varianten der Auth-/Privatpfade (z.B. /nl/login/?next=...). # robots-Disallow matcht nur Praefixe — ohne diese Zeilen crawlt Google die # uebersetzten Login-/Register-Seiten und meldet sie als "Alternative Seite # mit kanonischem Tag". '*' matcht den Sprachcode (en/es/fr/it/nl). Disallow: /*/login/ Disallow: /*/register/ Disallow: /*/checkout/ Disallow: /*/2fa/ Disallow: /*/passkeys/ Crawl-delay: 2 # AI Crawlers — allowed for public content User-agent: GPTBot Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: Google-Extended Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: ChatGPT-User Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: Claude-Web Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: anthropic-ai Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: PerplexityBot Allow: / Disallow: /dashboard/ Disallow: /admin/ User-agent: Amazonbot Allow: / Disallow: /dashboard/ Disallow: /admin/ Sitemap: https://creatordesk.de/sitemap.xml