User-Agent: * # Служебные разделы Bitrix Disallow: /bitrix/ Disallow: /local/ Disallow: /auth/ Disallow: /personal/ Disallow: /basket/ Disallow: /search/ Disallow: /*compare Disallow: /*?action= Disallow: /*&action= Disallow: /404.php # Умный фильтр Bitrix: бесконечные комбинации Disallow: /*/filter/ # Сортировка и лимиты временно открыты (26.10.2026), чтобы Google увидел canonical у старых копий ocStore. # Вернуть 6 строк Disallow для ?sort= &sort= ?order= &order= ?limit= &limit= 01.12.2026. Disallow: /*?set_filter= Disallow: /*?clear_cache= Disallow: /*?utm_ Disallow: /*&utm_ Disallow: /*?from= Disallow: /*?PHPSESSID= # Статика нужна для рендеринга страниц Allow: /bitrix/templates/ Allow: /bitrix/cache/ Allow: /bitrix/js/ Allow: /bitrix/*.css Allow: /bitrix/*.js Allow: /bitrix/*.svg Allow: /bitrix/*.woff2 Allow: /local/*.css Allow: /local/*.js # Метки рекламы и счётчиков (Яндекс склеивает такие адреса с основными) Clean-param: ysclid&yclid&gclid&fbclid&_openstat&etext&utm_source&utm_medium&utm_campaign&utm_content&utm_term # Краулер Meta: давал 90% нагрузки на сайт (лог 21.09.2026) Sitemap: https://napolnik.by/sitemap.xml User-Agent: FacebookBot Disallow: / Sitemap: https://napolnik.by/sitemap.xml # NAP_ROBOTS_BOTS 01.11.2026: роботы, бесполезные для Беларуси User-Agent: Baiduspider Disallow: / User-Agent: PetalBot Disallow: / User-Agent: QlyzeBot Disallow: / User-Agent: Bytespider Disallow: / User-Agent: Sogou web spider Disallow: / User-Agent: YisouSpider Disallow: / User-Agent: 360Spider Disallow: / User-Agent: Amazonbot Disallow: / User-Agent: meta-externalagent Disallow: /