| |
|
|
| | Добрый вечер! На главной странице сайта в цикле выводятся все последние обновления (новости, фото, комменты, темы форума, сообщения форума, вообщем любая новая инфа). Индексировать такую страницу не нужно, указал в head <meta name="robots" content="none">.
Когда робот заходит первый раз на сайт, он начинает с главной, а потом по другим страница проходится? И если главная страница сайта ему говорит "стоп", то он покинет сайт? Если да, то достаточно ли будет все страницы указать в xml карте сайта? | |
| |
|
|
| |
|
|
| |
для: ladan
(10.05.2012 в 21:04)
| | | Робот просмотрит все страницы сайта независимо от директив, включая запреты в robots.txt и NOINDEX. | |
| |
|
|
| |
|
|
| |
для: Владимир55
(10.05.2012 в 22:41)
| | | спасибо большое за ответ! | |
| |
|
|
| |
|
|
| |
для: Владимир55
(10.05.2012 в 22:41)
| | | В каком смысле?
Не, ну я понимаю, что посмотрит. Но проиндексирует-то он и в поиск попадут тока разрешенные?
Или они вообще на все правила забили? | |
| |
|
|
| |
|
|
| |
для: Sfinks
(10.05.2012 в 22:52)
| | | В поисковую выдачу попадут только те, что не запрещены. Но при ранжировании будут учтены все, включая админку. И даже те, на которые вообще нет ссылок, если имена файлов относятся к часто используемым. | |
| |
|
|
| |
|
|
| |
для: Владимир55
(11.05.2012 в 11:54)
| | | > включая админку
каким образом он туда попадет? Не будет же он пароль подбирать. И даже Яндекс-баром я не пользуюсь.
> И даже те, на которые вообще нет ссылок, если имена файлов относятся к часто используемым
а если сделать проверку юзер-агента и выкидывать роботов? Или он маскируется под юзера? | |
| |
|
|
| |
|
|
| |
для: Sfinks
(11.05.2012 в 12:05)
| | | Полагаю, что с Яндексом не следует вступать в борьбу, а лучше сотрулничать.
Пусть смотрит всё и обнаружит при этом, что Ваш сайт наивысшего качества. | |
| |
|
|
| |
|
|
| |
для: Владимир55
(11.05.2012 в 17:16)
| | | да как может быть наивысшего качества тестовый скрипт, который написан просто для проверки какой-нибудь фишки? А админка? Я, например, оформлением админки (для себя) занимаюсь в последнюю очередь.... Если вообще руки доходят. У админки главное - функционал, а не валидность, оптимизированность, уникальность и т.п..... Кроме того я не понимаю в принципе как он может попасть в запароленную часть сайта. | |
| |
|
|
| |
|
|
| |
для: Sfinks
(11.05.2012 в 22:23)
| | | В запароленную часть сайта он не пойдет - этого и не надо. Админку смотрят совсем с другой целью - опознать ЦМС и узнать кое-что ещё.
да как может быть наивысшего качества тестовый скрипт, который написан просто для проверки какой-нибудь фишки?
Если для проверки фишки, то зачем беспокоиться об индексации?
Если же индексация Вас интереует, то это уже сайт. | |
| |
|
|
