User-agent: *
Allow: /

# XML Sitemap
Sitemap: https://www.steelbroker.com.tr/sitemap.xml

# Arama motorları için genel kurallar
Disallow: /assets/js/
Disallow: /assets/css/
Disallow: *.min.js
Disallow: *.min.css

# Google Bot için özel kurallar
User-agent: Googlebot
Allow: /

# Bing Bot için özel kurallar
User-agent: bingbot
Allow: /

# Yandex Bot için özel kurallar
User-agent: YandexBot
Allow: /

# Crawl-delay (saniye)
Crawl-delay: 1