User-Agent: *
    Disallow: /favorites/
    Disallow: /compare/
    Disallow: /catalog2/
    Disallow: /login/
    Disallow: /*%
    Disallow: /index.php
    Disallow: /cgi-bin          # папка на хостинге
    Disallow: /bitrix/          # папка с системными файлами битрикса
    Disallow: /local/           # папка с системными файлами битрикса
    Disallow: /*index.php$      # дубли страниц index.php
    Disallow: /auth/            # авторизация
    Disallow: /personal/        # личный кабинет
    Disallow: */search/         # поиск
    Disallow: *captcha          # каптча
    Disallow: */feed            # все фиды
    Disallow: */rss             # rss фид
    Allow: */upload/            # открываем папку с файлами uploads
    Allow: /bitrix/*.js         # здесь и далее открываем для индексации скрипты
    Allow: /bitrix/*.css
    Allow: /local/*.js
    Allow: /local/*.css
    Allow: /local/*.jpg
    Allow: /local/*.jpeg
    Allow: /local/*.png
    Allow: /local/*.gif

    Clean-param: utm_source&utm_medium&utm_campaign&utm_content&utm_term&yclid&ysclid&openstat&from&SORT&SHOWBY&SHOWALL&SHOW_ALL&SPHRASE_ID&FILTER&B_ORDER&BRAND&price_from&price_to&SECTION_ID&TYPE

    Host: https://www.nersplus.ru
    Sitemap: https://www.nersplus.ru/sitemap.xml
    Crawl-delay: 15

    User-Agent: YandexMarket
    Allow: /bitrix/catalog_export/