robots.txt

zdorovby добавил(а) 13 мес. назад
Отклонен(а)

Подскажите, может у кого есть правильный robots.txt для Аспро Максимум, чтобы не блокировало SEO умного фильтра.

Ответы (2)

фото
1

Добрый день! Хотим уточнить, в чем именно состоит проблема с robots.txt. Обычно через этот файл принято закрывать стандартный URL фильтра. Но контроль индексации также можно выполнить и через Умный SEO — https://aspro.ru/docs/course/course46/lesson2750/. URL-адреса, которые генерируются через Умный SEO, обычно не такие типичные как стандартные. Поэтому в этом инструменте сложнее написать правило, чтобы все закрыть.

Подробнее о файле robots.txt вы также можете узнать в документации 1С-Битрикс — https://clck.ru/346KvB.

Наши специалисты техподдержки готовы помочь вам с проблемой robots.txt — https://aspro.ru/support/. Будем на связи!

фото
1

Спасибо за ответ. Но у меня вызвало сомнения в правильности robots.txt. Если установить решение Аспро Максимум, то по умолчанию ставится User-Agent: *

Disallow: /auth*

Disallow: /basket*

Disallow: /order*

Disallow: /personal/

Disallow: /search/

Disallow: /test/

Disallow: /ajax/

Disallow: *index.php*

Disallow: /*show_include_exec_time=

Disallow: /*show_page_exec_time=

Disallow: /*show_sql_stat=

Disallow: *bitrix*

Disallow: /*clear_cache=

Disallow: /*clear_cache_session=

Disallow: /*ADD_TO_COMPARE_LIST

Disallow: /*ORDER_BY

Disallow: /*print*

Disallow: /*action*

Disallow: /*register=

Disallow: /*password*

Disallow: /*login=

Disallow: /*type=

Disallow: /*sort=

Disallow: /*order=

Disallow: /*logout=

Disallow: /*auth=

Disallow: /*backurl=

Disallow: /*back_url=

Disallow: /*BACKURL=

Disallow: /*BACK_URL=

Disallow: /*back_url_admin=

Disallow: /*?utm_source=

Disallow: *?arrFilter*

Директив Allow? вообще нет. А если генерируем, то получаем вот такой:

User-Agent: *

Disallow: */index.php

Disallow: /bitrix/

Disallow: /*show_include_exec_time=

Disallow: /*show_page_exec_time=

Disallow: /*show_sql_stat=

Disallow: /*bitrix_include_areas=

Disallow: /*clear_cache=

Disallow: /*clear_cache_session=

Disallow: /*ADD_TO_COMPARE_LIST

Disallow: /*ORDER_BY

Disallow: /*PAGEN

Disallow: /*?print=

Disallow: /*&print=

Disallow: /*print_course=

Disallow: /*?action=

Disallow: /*&action=

Disallow: /*register=

Disallow: /*forgot_password=

Disallow: /*change_password=

Disallow: /*login=

Disallow: /*logout=

Disallow: /*auth=

Disallow: /*backurl=

Disallow: /*back_url=

Disallow: /*BACKURL=

Disallow: /*BACK_URL=

Disallow: /*back_url_admin=

Disallow: /*?utm_source=

Disallow: /*?bxajaxid=

Disallow: /*&bxajaxid=

Disallow: /*?view_result=

Disallow: /*&view_result=

Allow: /bitrix/components/

Allow: /bitrix/cache/

Allow: /bitrix/js/

Allow: /bitrix/templates/

Allow: /bitrix/panel/


Так возникает вопрос, какой из них правильный? Спасибо.

фото
1

Добрый день!

Чтобы верстка оставалась неизменной, рекомендуем открывать следующие директивы:

Allow: /bitrix/components/
Allow: /bitrix/cache/
Allow: /bitrix/js/
Allow: /bitrix/templates/
Allow: /bitrix/panel/

Allow — это дополнение к disallow. То есть всю папку 1С-Битрикс мы закрываем по умолчанию, а открываем только некоторые. Согласно документации Яндекса, User-Agent: * тоже необходимо указывать.

фото
Комментировать
 
Прикрепить файлы