	Translated has no connection with the authors of this page and is not responsible for its content. View original page	Lingobot Home
What you are seeing is the cache version of a page that has been translated automatically

Исключение роботов

	Translated has no connection with the authors of this page and is not responsible for its content. View original page	Lingobot Home
What you are seeing is the cache version of a page that has been translated automatically

Страницы роботов стержня

Исключение роботов

Иногда находка людей они были индексированы роботом индицирования, или то робот открытия ресурса посещало часть места которое for some reason не должно быть посещено роботами.

В опознавании этой проблемы, много роботов стержня предлагают средства для администраторов web site и содержимых providers для того чтобы ограничивать робот делает. Это достигано через 2 механизма:

Протокол исключения роботов
Администратор web site может показать которые части места не должны быть vistsed роботом, путем обеспечивать специально форматный архив на их месте, в http://.../robots.txt.

Бирка META роботов
Автор стержня может показать если страница may or may not быть индексирована, или проанализирована для соединений, то через пользу специальной бирки META HTML.

Остаток этого вызывает обеспечивает детальные описания на этих средствах.

Заметьте что эти методы полагаются на сотрудничестве от робота, и by no means гарантируйте, что работать для каждого робота. Если вы более сильное предохранение от роботов и других веществ, то вы должны использовать другие методы such as защита секретности пароля.

Протокол исключения роботов

Протоколом исключения роботов будет метод позволяет администраторам web site показать к посещая роботам части их места не должны быть посещены роботом.

В nutshell, когда vists робота web site, мнение http://www.foobar.com/,, котор оно firsts проверяет для http://www.foobar.com/robots.txt. Если оно может найти этот документ, то оно проанализирует свое содержание для показателей как:

Потребител-вещество: *
Disallow: /

увидеть если оно позволен retrieve документ. Точные детали на как эти правила можно определить, и они намереваются, смогите быть найдено в:

Бирка META роботов

Бирка META роботов позволяет авторам HTML показать к посещая роботам если документ может быть индексирован, или после того как она использована для того чтобы сжать больше соединений. Никакое действие администратора сервера NEOBXODIMO.

Заметьте что в настоящее время только немного роботов снабжают это.

В этом просто примере:

<META NAME= " РОБОТЫ " CONTENT= " NOINDEX, NOFOLLOW " >

робот должен ни индексировать этот документ, ни анализирует его для соединений.

Детальные описания на как это маркирует работы обеспечены:

Направляющий выступ администратора web server к бирке META роботов
Направляющий выступ автора HTML к бирке META роботов
Примечания оригинала от мая 1996 IndexingWorkshop

Страницы роботов стержня

Протокол исключения роботов	Администратор web site может показать которые части места не должны быть vistsed роботом, путем обеспечивать специально форматный архив на их месте, в http://.../robots.txt.
Бирка META роботов	Автор стержня может показать если страница may or may not быть индексирована, или проанализирована для соединений, то через пользу специальной бирки META HTML.