# robots.txt – BGN Reinigungsservice GmbH
# Last-Update: 2025-10-13
# Zweck: Steuerung von Suchmaschinen- und KI-Crawlern

User-agent: *
Allow: /
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Disallow: /wp-login.php
Disallow: /cgi-bin/
Disallow: /xmlrpc.php
Disallow: /wp-json/
Disallow: /feed/
Disallow: /*/feed/

# Tracking-Parameter
Disallow: /*?s=
Disallow: /*?replytocom=
Disallow: /*?fbclid=
Disallow: /*?gclid=
Disallow: /*?utm_

# Ressourcen für Rendering erlauben
Allow: /*.css$
Allow: /*.js$
Allow: /wp-content/uploads/

# Google Ads-Bots (Landingpage-Qualitätsprüfung)
User-agent: AdsBot-Google
Allow: /
User-agent: AdsBot-Google-Mobile
Allow: /

# Crawl-Delay für bestimmte Bots (Google ignoriert diese Anweisung)
User-agent: Bingbot
Crawl-delay: 10
User-agent: Yandex
Crawl-delay: 10

# Domain-Präferenz
Host: www.bgn.at

# Sitemaps
Sitemap: https://www.bgn.at/sitemap_index.xml

# Wissensdatei für KI-Crawler (LLMs)
LLMS: https://www.bgn.at/llms.txt