Составить грамотный robots.txt + решение по sitemap.xml для Фото.

Бюджет: 1 000 Р
1. Проанализировать сайт и составить грамотный robots.txt для сайта на Webasyst.
2. Предложить решение по карте сайта Sitemap для ФОТО.

Содержимое Sitemap на данный момент:

https://sait.ru/sitemap-blog.xml
https://sait.ru/sitemap-photos.xml
https://sait.ru/sitemap-site.xml

sitemap-blog.xml и sitemap-site.xml без проблем меняются и настраиваются т.к. куплен плагин Sitemap PRO. Данным плагином можно настроить Сайт, Магазин и Блог. А для Фото в Webasyst, я так понимаю он не подходит. И в карте sitemap-photos.xml творится бардак. В ней есть нужные ссылки на фотогалерею сайта, такие как:

https://sait.ru/works/
https://sait.ru/works/gallery-190/

И есть мусор, который не надо индексировать:

https://sait.ru/works/photo/dsc_0003/
https://sait.ru/works/favorites/

Конечно, можно в robots.txt запретить индексацию папок /photo/ и /favorites/. Но вроде это не очень, когда на сайте sitemap.xml содержатся ссылки запрещенные в robots.txt.

Возможно я ошибаюсь! Жду ваши предложения!

2 ответа

Откликнуться на заказ

Отклики на заказы могут добавлять только зарегистрированные эксперты и разработчики Webasyst. Стать экспертом.

Чтобы добавить комментарий, зарегистрируйтесь или войдите