User-agent: * Allow: / # Разрешаем индексацию всех важных ресурсов Allow: /js/ Allow: /css/ Allow: /images/ Allow: /assets/ Allow: /fonts/ # Запрещаем технические директории Disallow: /tmp/ Disallow: /temp/ Disallow: /backup/ Disallow: /logs/ Disallow: /cache/ Disallow: /.git/ Disallow: /node_modules/ Disallow: /project_backup/ Disallow: /*.php$ Disallow: /*.zip$ Disallow: /*.tar$ Disallow: /*.txt$ Disallow: /*.json$ Disallow: /*.conf$ Disallow: /nginx-*.log$ Disallow: /ssl/ Disallow: /*.env$ Disallow: /*.env.* Disallow: /*.config$ Disallow: /*.sql$ Disallow: /*.bak$ Disallow: /*.old$ Disallow: /*.inc$ Disallow: /*.log$ Disallow: /.* Disallow: */config/* Disallow: */settings/* # Специальные директивы для поисковых систем User-agent: Googlebot Allow: / Allow: /*.html$ Allow: /*.js$ Allow: /*.css$ Allow: /*.png$ Allow: /*.jpg$ Allow: /*.jpeg$ Allow: /*.gif$ Allow: /*.svg$ Allow: /*.webp$ Allow: /*.ico$ User-agent: Yandex Allow: / Allow: /*.html$ Allow: /*.js$ Allow: /*.css$ Allow: /*.png$ Allow: /*.jpg$ Allow: /*.jpeg$ Allow: /*.gif$ Allow: /*.svg$ Allow: /*.webp$ Allow: /*.ico$ Clean-param: utm_source&utm_medium&utm_campaign&utm_content&utm_term # Специальные директивы для конкурентных запросов # Разрешаем индексацию страниц с упоминанием конкурентов Allow: /*trademo* Allow: /*трейдмо* Allow: /*payscrow* Allow: /*пэйскроу* Allow: /*cryptocards* Allow: /*криптокардс* Allow: /*paypal* Allow: /*qiwi* Allow: /*киви* Allow: /*юмани* Allow: /*юкасса* Allow: /*webmoney* Allow: /*payeer* Allow: /*perfect*money* Allow: /*advcash* Allow: /*epayments* Allow: /*cryptopay* Allow: /*bitpay* Allow: /*coinpayments* Allow: /*stripe* Allow: /*payoneer* Allow: /*skrill* Allow: /*neteller* Allow: /*checkout* Allow: /*worldpay* Allow: /*braintree* Allow: /*authorize* Allow: /*paymentwall* Allow: /*bluesnap* Allow: /*robokassa* Allow: /*единая*касса* Allow: /*cloudpayments* # Специальные директивы для ИИ-ботов User-agent: ChatGPT-User Allow: / User-agent: CCBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Google-Extended Allow: / User-agent: GPTBot Allow: / User-agent: Anthropic-AI Allow: / # Указываем карту сайта Sitemap: https://rosplat.contact/sitemap.xml # Указываем основную страницу Host: rosplat.contact # Дополнительные директивы для лучшей индексации Crawl-delay: 0.5