User-agent: * Allow: / # Основные поисковые системы User-agent: Googlebot Allow: / User-agent: Yandex Allow: / User-agent: Bingbot Allow: / # Запрещаем индексацию служебных файлов Disallow: /css/ Disallow: /js/ Disallow: /*.css$ Disallow: /*.js$ # Разрешаем изображения для поисковых систем Allow: /images/ Allow: /photo/ Allow: /*.jpg$ Allow: /*.jpeg$ Allow: /*.png$ Allow: /*.webp$ # Указываем sitemap Sitemap: https://дом13.рф/sitemap.xml # Время задержки между запросами (в секундах) Crawl-delay: 1 # Дополнительные директивы для Яндекса User-agent: Yandex Crawl-delay: 2 Clean-param: utm_source&utm_medium&utm_campaign&utm_content&utm_term