# robots.txt für baumer.traidendorf.de User-agent: * Allow: / # Sitemap Sitemap: https://baumer.traidendorf.de/sitemap.xml # Verzeichnisse die nicht gecrawlt werden sollen Disallow: /phpmailer/ Disallow: /config.php Disallow: /send-mail.php # Verhindere Crawler von Spam-Bots User-agent: AhrefsBot Disallow: / User-agent: SemrushBot Disallow: / User-agent: DotBot Disallow: /