Помогите с robots.txt

Форум:	Форум PHP	Форум Apache	Форум Регулярные Выражения	Форум MySQL	HTML+CSS+JavaScript	Форум Flash	Разное
Новые темы:	0	0	0	0	0	0	0

Здравствуйте, Посетитель!

вид форума:

тема: Помогите с robots.txt

следующая тема

предыдущая тема

автор: Blizard (15.08.2011 в 10:23) письмо автору

Создал robots.txt следующего вида:

User-agent: * User-Agent: Yandex Disallow: /search.php?kateg=* User-agent: Googlebot Disallow: /search.php?kateg=*

пытаюсь запретить к индексации страницу search.php и все динамические её копии, но есть еще вариант сделть так:

User-Agent: Yandex Disallow: /search.php?kateg=* User-agent: Googlebot Disallow: /search.php?kateg=*

или так:

User-agent: * Disallow: /search.php?kateg=*

Подскажите, как именно будет правильно?

Ответить

	автор: Гость (15.08.2011 в 11:31) письмо автору
	для: Blizard (15.08.2011 в 10:23)
	последний вариант будет работать для всех роботов. Так что не нужно перечислять одинаковые правила для каждого по отдельности.
	Ответить

вверх

Разное