User-Agent: *
# Базовое Bitrix
Disallow: /cgi-bin
Disallow: /bitrix/
Disallow: *bitrix_*=
Disallow: /local/
Disallow: /*index.php$
Disallow: /auth/
Disallow: *auth=
Disallow: /personal/
Disallow: *register=
Disallow: *forgot_password=
Disallow: *change_password=
Disallow: *login=
Disallow: *logout=
Disallow: */search/
Disallow: *action=
Disallow: *print=
Disallow: *?new=Y
Disallow: *?edit=
Disallow: *?preview=
Disallow: *backurl=
Disallow: *back_url=
Disallow: *back_url_admin=
Disallow: *captcha
Disallow: */feed
Disallow: */rss
# Стандартные фильтры и сортировки
Disallow: *?FILTER*=
Disallow: *?ei=
Disallow: *?p=
Disallow: *?q=
Disallow: *?tags=
Disallow: *B_ORDER=
Disallow: *BRAND=
Disallow: *CLEAR_CACHE=
Disallow: *ELEMENT_ID=
Disallow: *S_LAST=
Disallow: *SECTION_ID=
Disallow: *SECTION[*]=
Disallow: *SHOWALL=
Disallow: *SHOW_ALL=
Disallow: *SHOWBY=
Disallow: *SORT=
Disallow: *SPHRASE_ID=
Disallow: *TYPE=
# Специфические фильтры
Disallow: */filter/*/apply/
Disallow: */price-base-from-
Disallow: */price-base-to-
Disallow: *?*display=
Disallow: *?*s=
Disallow: *?*view=
Disallow: *?*year=
# Запрет индексации меток
Disallow: *?*utm*=
Disallow: *?*openstat=
Disallow: *?*from=
Disallow: *?*yclid=
Disallow: *?*ymclid=
Disallow: *?*gclid=
Disallow: *?replytocom
# Разрешение индексации скриптов, изображений и файлов
Allow: */upload/
Allow: /bitrix/*.js
Allow: /bitrix/*.css
Allow: /local/*.js
Allow: /local/*.css
Allow: /local/*.jpg
Allow: /local/*.jpeg
Allow: /local/*.gif
Allow: /local/*.png
Allow: /local/*.svg
# Информация о том где находится карта сайта
Sitemap: https://mobitron.kz/sitemap.xml
# Настройка оптимальной скорости индексирования
Crawl-delay: 10
Sitemap: https://www.mobitron.kz/sitemap.xml