Избавиться от несуществующие ссылок с "[" в url адресе (с квадратными скобками)

Бюджет: 2 000 Р

На протяжении месяца после развертывания сайта в Яндекс Вебмастере появляются ссылки вида:

site.ru/product/karkasnyj-dom-6h8-s-kotelnojproekt-k-11/]/category/nami-postroeno/category/karkasnye-doma/category/doma_iz_brusa/product/derevjannyj-dom-8h10-iz-brusaproekt-db-116/category/ot-70-do-150m2/

Для них Яндекс присваивает 404 ошибку или добавляет в индекс как дубль. У ссылок после "]" генерируется url состоящий из ссылок на категории сайта. Откуда могу взяться такие ссылки?


Ссылка на саму страницу http://skpel.ru/product/karkas...

1 ответ

  • В http://skpel.ru/sitemap-shop.xml все ок, смотрите откуда идут запросы на левые страницы.

    • Николай Паньшин Николай Паньшин 17 декабря 2018 18:17 #

      Запросы идут от поисковых ботов. Пример из логов:

      66.249.75.9 - - [11/Dec/2018:13:52:05 +0300] "GET /published/SC/html/scripts/js/jquery.min.js HTTP/1.0" 404 1916 "http://skpel.ru/product/karkasnyj-dom-6h8-s-kotelnojproekt-k-11/%5D/category/fundamenty/category/karkasnye-doma/product/karkasnyj-dom-9h12-proekt-k-112/category/doma_iz_brusa/category/ot-70-do-150m2/product/dom-iz-brusa-7h10-proekt-db-70/category/doma-7-h-7/category/doma-8-h-8/product/derevjannyj-dom-iz-suhogo-strogannogo-brusa-8h8-proekt-db-85/category/proekty-bani/category/nami-postroeno/product/brusovoj-dom-v-gornoj-shaldihe/category/doma-iz-kleenogo-brusa/category/karkasnye-doma/product/karkasnyj-dom-10h11-proekt-k-118/category/do-150-m-kv/" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Safari/537.36"
      66.249.75.9 - - [11/Dec/2018:13:52:07 +0300] "GET /published/SC/html/scripts/js/fancybox/jquery.fancybox.min.css HTTP/1.0" 404 1916 "http://skpel.ru/product/karkasnyj-dom-6h8-s-kotelnojproekt-k-11/%5D/category/fundamenty/category/karkasnye-doma/product/karkasnyj-dom-9h12-proekt-k-112/category/doma_iz_brusa/category/ot-70-do-150m2/product/dom-iz-brusa-7h10-proekt-db-70/category/doma-7-h-7/category/doma-8-h-8/product/derevjannyj-dom-iz-suhogo-strogannogo-brusa-8h8-proekt-db-85/category/proekty-bani/category/nami-postroeno/product/brusovoj-dom-v-gornoj-shaldihe/category/doma-iz-kleenogo-brusa/category/karkasnye-doma/product/karkasnyj-dom-10h11-proekt-k-118/category/do-150-m-kv/" "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Safari/537.36"

      141.8.132.10 - - [11/Dec/2018:15:57:42 +0300] "GET /product/karkasnyj-dom-6h8-s-kotelnojproekt-k-11/%5D/category/doma_iz_brusa/product/dom-iz-brusa-8h10-proekt-db-116a/category/ot-70-do-150m2/product/brusovoj-dom-8h8-proekt-db-81/category/nami-postroeno/ HTTP/1.0" 301 514 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
      141.8.183.35 - - [11/Dec/2018:15:57:43 +0300] "GET /product/karkasnyy-dom-6kh8-s-kotelnoy-proekt-k-11a/%5D/category/doma_iz_brusa/product/dom-iz-brusa-8h10-proekt-db-116a/category/ot-70-do-150m2/product/brusovoj-dom-8h8-proekt-db-81/category/nami-postroeno/ HTTP/1.0" 404 22954 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Откликнуться на заказ

Отклики на заказы могут добавлять только зарегистрированные эксперты и разработчики Webasyst. Стать экспертом.

Чтобы добавить комментарий, зарегистрируйтесь или войдите