| |
|
|
| | Здравствуйте, на сайте в robots.txt прописано правило (Disallow: /*?), с которым робот не сможет найти кое-какие страницы на сайте, например через постраничную навигацию.
Зато такие страницы есть в sitemap.
Можно ли так делать? В конечном итоге, такие страницы должны быть проиндексированы, но исключить из индекса страницы с навигацией и тп
http://sait.ru/catalog/?page=10 - не индексировать
http://sait.ru/catalog/3/ - индексировать, но робот не сможет найти ее на сайте, по этому прописал такие страницы в sitemap | |
| |
|
|
| |
|
|
| |
для: ladan
(05.08.2012 в 09:38)
| | | Так делать нельзя. | |
| |
|
|
| |
|
|
| |
для: Владимир55
(05.08.2012 в 10:41)
| | | Кошмар, это же сколько тогда дублированного контента будет... А чем грозит это? | |
| |
|
|
| |
|
|
| |
для: ladan
(05.08.2012 в 11:09)
| | | Понижением оценки качества Вашего сайта. | |
| |
|
|
