User-agent: *
Allow: /

# Sitemap
Sitemap: https://rolabs.net/sitemap.xml

# Блокируем API и внутренние папки
Disallow: /api/
Disallow: /_nuxt/
Disallow: /admin/

# Разрешаем основные страницы
# Allow: /api/
Allow: /products
Allow: /services
Allow: /contact
Allow: /partners

# Crawl-delay для вежливого краулинга
Crawl-delay: 1

# Специальные правила для поисковых ботов
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: Yandex
Allow: /