Странная страница УРЛ в яндекс вебмастере

Общее Общие вопросы
,
1

Сегодня зашел в яндекс вебмастер, пишет что много страниц не имеют мета описания. Ну это ладно - добавлю. Что меня удивило - откуда в яндекс вебмастере такая страница https://xtty.ru/?match=all&subcats=Y&pcode_from_q=Y&pshort=Y&pfull=Y&pname=Y&pkeywords=Y&search_performed=Y&hint_q=blank&dispatch=products.search&security_hash=3c2647c436d64c7b7918648bb2f1243b

Мне просто интересно что сия последовательность означает, как она попала в вебмастер и… Ну не знаю… я такую страницу вроде не создавал. И что интересно она открывается. Просто откуда такой гигантский запрос УРЛ в вебмастере. Кто нибудь сталкивался?
Версия FREE - CS-Cartv4.18.1.

2

Похоже на результаты поиска.

3

Все верно, это поиск. Проверьте свой robots.txt, есть ли в нем disallow или clean-param для Яндекса. Если в robots все нормально, в вебмастер могут попадать такие страницы, но они очень быстро исключаются, как не соответствующие.

4

У меня кажется по умолчанию такой robots.txt

User-agent: *
Disallow: /app/
Disallow: /store_closed.html

Может нужно что то изменить в нем или добавить?

5

Используйте либо

Disallow: *?*

для всех ботов, либо непосредственно для яндекса

User-agent: Yandex
Clean-param: match&sl&subcats&pcode_from_q&pshort&pfull&pname&pkeywords&search_performed&q&dispatch&features_hash&product_id&post_redirect_url&promotion_id&page&sort_by&sort_order&layout&return_url&block&position&s_layout&redirect_url&utm_sourse&frommarket
Clean-param: items_per_page&with_images&selected_section&clid&prev_url&n_items&show_not_found_notification&utm_medium&utm_campaign&utm_content&utm_term&source&region&region_name&placement&security_hash&order_id
6

О спасибо огромное, обязательно учту :handshake:
А не подскажете может есть где то оптимальный robots.txt?
Или может подсмотреть на каких нибудь сайтах на cs-cart с большими пузомерками?
Хотя вроде это все должно быть индивидуально для каждого сайта…

7

тема много раз обсуждалась, почитайте
https://forum.cs-cart.ru/search?q=robots

1 лайк
8

Спасибо !

9

Вбиваете все сайты сделанные на cs-cart )))) выходит огромнейший список, и можно глянуть от индусов до российских какие используют robotsы

10
Спойлер

Индусы – люди, исповедующие индуизм. Индусами могут быть и британцы с французами.
Жителей Индии корректно называть индийцами.