| |
|
|
| | Как боротся с ботами поисковиков?
В частности не хочу что бы меня индексировали google, yahoo, etc. | |
| |
|
|
| |
|
|
| |
для: n0rt
(12.06.2006 в 15:29)
| | | В файле robot
User-agent: *
Disallow: /укажите все директории, которые у вас есть/
|
| |
| |
|
|
| |
|
|
| |
для: 123php
(12.06.2006 в 16:15)
| | | А этого будет не достаточно?
User-agent: *
Disallow: /
|
А как перечислять дерриктории? Так (?):
Disallow: / /images/ /forum/
|
или
Disallow: /
Disallow: /images/
Disallow: /forum/
|
| |
| |
|
|
| |
|
|
| |
для: 123php
(12.06.2006 в 16:15)
| | | Добавлю лишь, что файл должет иметь текстовое расширение robot.txt. | |
| |
|
|
| |
|
|
| |
для: cheops
(12.06.2006 в 21:33)
| | | всмысле robot.txt ? Разве не robots.txt должен называться файл? | |
| |
|
|
| |
|
|
| |
для: dios™
(12.06.2006 в 22:58)
| | | Да, robots.txt
Disallow: /
Disallow: /images/
Disallow: /forum/
|
| |
| |
|
|
