Ответили из ТП @CS-Commerce
Ок, я понял, видимо ему недостаточно 403 заголовка что бы не сканировать страницу, в ближайшее время выпустим обновление и добавим заголовок запрещающий индексацию страницы.
Ответили из ТП @CS-Commerce
Ок, я понял, видимо ему недостаточно 403 заголовка что бы не сканировать страницу, в ближайшее время выпустим обновление и добавим заголовок запрещающий индексацию страницы.
у тебя же в роботсе закрыта эта страница если я не путаю?
вернее ты выкладывал тут где свой роботс и там вроде стоял запрет на этот файл … сейчас посмотрел, нету … надо глянуть твои старые сообщения
Поисковики могут воспринимать файл роботс, как рекомендацию, но не запрет.
у артура, ка мне помнится, был роботс в котором был прописан запрет, сейчас такого нет … может это и есть причинно следственная связь.
Да, в роботс есть такая строка.
Disallow: /search/
У меня много на что стоит запрет, хотя консоль всегда пишет “Страница проиндексирована не смотря на блокировку в Robots и показывается в поисках выдачи”
сейчас такого запрета нет, но вроде ты выкладывал свой роботс и там такое было … могу ошибаться
Да, вы правы, это был старый мне его кто-то давал из форумчан, было куча ошибок, в итоге обратился как и всегда к @alex_vp сейчас стоит годный robots, ТП кстати вкурсе что стоит запрет, в общем ждем обновы.