User-agent: * Disallow: /Admin/ Crawl-Delay: 10 # Επιτρέπουμε την πρόσβαση σε όλα τα γνωστά AI bots (LLMs) User-agent: gptbot Allow: / User-agent: gemini Allow: / User-agent: claude Allow: / User-agent: anthropic-ai Allow: / User-agent: cohere-ai Allow: / User-agent: perplexitybot Allow: / User-agent: ai.txt Allow: /