Ruslan1
05.Ноябрь.2021 14:08:48
18505
User-agent: Yandex
Disallow: ?selected_section
Disallow: ?show_not_found_notification
Disallow: /search/
Disallow: /variant
Disallow: /wishlist.delete
Disallow: /attachment
Disallow: /items_per_page
Disallow: /catalog/
Disallow: /app/
Disallow: /store_closed.html
Disallow: /orders/
Disallow: /login/
Disallow: / ?subcats
Disallow: /index.php
Disallow: product_id
Disallow: /?match
Disallow: features_hash
Disallow: /amp/
Disallow: /cdn-fpw/
Allow: // .js
Allow: // .css
Sitemap: https://lifefight.ru/sitemap.xml
User-agent: Googlebot
Disallow: ?selected_section
Disallow: ?show_not_found_notification
Disallow: /search/
Disallow: /variant
Disallow: /wishlist.delete
Disallow: /attachment
Disallow: /items_per_page
Disallow: /catalog/
Disallow: /app/
Disallow: /store_closed.html
Disallow: /orders/
Disallow: /login/
Disallow: / ?subcats
Disallow: /index.php
Disallow: product_id
Disallow: /?match
Disallow: features_hash
Allow: // .js
Allow: // .css
Sitemap: https://lifefight.ru/sitemap.xml
User-agent: *
Disallow: ?selected_section
Disallow: ?show_not_found_notification
Disallow: /collection_product
Disallow: /search/
Disallow: /variant
Disallow: /wishlist.delete
Disallow: /attachment
Disallow: /items_per_page
Disallow: /catalog/
Disallow: /app/
Disallow: /store_closed.html
Disallow: /orders/
Disallow: /login/
Disallow: / ?subcats
Disallow: /index.php
Disallow: product_id
Disallow: / ?match*
Disallow: features_hash
Disallow: /cdn-fpw/
Allow: // .js
Allow: // .css
Sitemap: https://lifefight.ru/sitemap.xml
alexa
05.Ноябрь.2021 22:15:44
18506
Какое-то у вас масло масленое. Укоротить можно как минимум на треть.
Ruslan1
05.Ноябрь.2021 22:17:57
18507
Скопировал, еще удалил строки некоторые) Что еще убрать?
alexa
05.Ноябрь.2021 22:29:20
18508
Хотя бы так:
User-agent: *
Disallow: /collection_product
Disallow: /search/
Disallow: /variant
Disallow: /wishlist.delete
Disallow: /attachment
Disallow: /items_per_page
Disallow: /catalog/
Disallow: /app/
Disallow: /store_closed.html
Disallow: /orders/
Disallow: /login/
Disallow: /index.php
Disallow: product_id
Disallow: /?*
Disallow: features_hash
Disallow: /cdn-fpw/
Disallow: /cart
Sitemap: https://lifefight.ru/sitemap.xml
Ruslan1
06.Ноябрь.2021 05:57:42
18509
а
Allow: // .js
Allow: // .css
?
Кажется много /* вроде проще должно быть?
alexa
06.Ноябрь.2021 06:37:01
18510
js и css не те файлы, которые надо закрывать. Хотите, так закройте, только смысла в этом никакого нет.
Ruslan1
06.Ноябрь.2021 06:38:30
18511
Allow же наоборот разрешает вроде?
alexa
06.Ноябрь.2021 06:40:37
18512
А показывать, что открыто вообще нонсенс, так как по умолчанию всё разрешено, что не запрещено. Если всё разрешено, то можно вообще роботс не создавать.
Ruslan1
06.Ноябрь.2021 06:41:57
18513
Проверил яндекс ругается на этот роботс, нашел старый свой роботс где то в архивах)) его поставил
User-agent: *
Disallow: /app/
Disallow: /cgi-bin/
Disallow: /js/
Disallow: /var/
Disallow: /login/
Disallow: /config.php
Disallow: /config.local.php
Disallow: /init.php
Disallow: /store_closed.html
Disallow: /index.php?dispatch=
Disallow: /features_hash
Disallow: /?selected
Disallow: /*page-
Disallow: /*page=
Disallow: /page
User-agent: Googlebot
Disallow:
User-agent: AdsBot-Google
Disallow:
User-agent: Googlebot-Image
Disallow:
Host: https://lifefight.ru
Sitemap: https://lifefight.ru/sitemap.xml
Вот это только смущает:
Disallow: /js/
Disallow: /var/
Ruslan1
06.Ноябрь.2021 06:43:03
18514
только это
Disallow: /js/
alexa
06.Ноябрь.2021 06:46:56
18515
alexa:
js и css
js и css вообще не надо указывать в роботсе ни в каком виде.
Ruslan1
06.Ноябрь.2021 06:48:41
18516
Все отлично) Этот поставил гугл в консоли нормаль грузит.
Там еще по захиду вопрос с их защитой от ботов, кеширования ботов и 7 что то там) Возможно они как то влияли(выключил)
alexa
06.Ноябрь.2021 06:56:13
18518
У меня так, никто не ругается.
User-agent: Yandex
Clean-param: combination&match&subcats&pcode_from_q&pshort&pfull&pname&pkeywords&search_performed&q&dispatch&features_hash&product_id&post_redirect_url&promotion_id&page&sort_by&sort_order&layout&return_url&block&position&s_layout&redirect_url&utm_sourse&frommarket&items_per_page&with_images&selected_section&clid&prev_url&n_items&show_not_found_notification&utm_medium&utm_campaign&utm_content&utm_term&block&source®ion®ion_name&placement&roistat
User-agent: Googlebot
Disallow: ?
User-agent: *
Disallow: /app/
Disallow: /store_closed.html
Disallow: /bin/
Disallow: /search/
Disallow: /admin*
Disallow: /cart
Disallow: /login/
Disallow: /*dispatch=
Disallow: /*subcats=
Disallow: /*features_hash=
Disallow: /*items_per_page=
Disallow: /*sort_by=
Disallow: /*aoc=
Disallow: /page=
Disallow: / -clone
Disallow: /index.php?dispatch=geo_maps.shipping_estimation
Allow: /
Sitemap: https://site.ru/sitemap.xml
Ruslan1
06.Ноябрь.2021 07:00:27
18519
Disallow: ? Правило начинается не с символа ‘/’ и не с символа ‘*’
это яндекс
alexa
06.Ноябрь.2021 07:02:43
18520
Не понял вопроса. Что “слеш”, и что “звёздочка”?
Ruslan1
06.Ноябрь.2021 07:05:44
18521
не знаю это прямая цитата с вебмаста. Попробуй в инструментах проверить робот.
я так понимаю в начале правила / или * должны быть обязательно
alexa
06.Ноябрь.2021 07:07:36
18522
Значения не имеет, что в лоб, что по лбу.
Ruslan1
06.Ноябрь.2021 07:08:41
18523
У меня уже другой вопрос) Почему то, зачем то у меня бренды нофоллов https://lifefight.ru/adidas/
где в шаблонах искать чтобы открыть?