Несколько вопросов

Что такое ВебРобот?

ВебРобот - это программа, которая автоматически ходит по гипертекстовой Веб-структуре, получая и рекурсивно обрабатывая все документы, на которые присутствуют ссылки.

Обычные браузеры не являются веброботами, так как находятся под управлением человека.

Для чего создаются роботы?

ВебРоботы используются для различных нужд:

• индексирование;
• проверка документов;
• проверка ссылок;
• контроль за новостями;
• создание копий документов.

Чем различаются Роботы, Пауки (Spiders), Бродилки (Crawler), Черви (Worms), Муравьи (Ants)?

• Роботы - общее название;
• Пауки, Бродилки - то же самое, что и роботы, но более красивые названия;
• Черви - похожи на роботов, но имеют свойство воспроизведения;
• Муравьи - распределенные взаимосвязанные роботы.

Почему некоторые люди относятся предвзято к роботам?

• Некоторые реализации роботов могут "загружать" сети и серверы. Это обычная ошибка людей, начинающих писать робота. На данное время существует много документации, описывающей и предотвращающей ошибки в ВебРоботах.
• ВебРоботы могут управляться людьми, допускающими ошибки в их конфигурировании.

Но все эти ошибки не от программ, а от людей.

Где можно увидеть работу робота?

Зайдите практически на любой поисковой сайт (например, на www.altavista.com, www.yandex.ru). Вся информация, находящаяся на этих ресурсах, получена с помощью программ-роботов.

На validator.w3.org Вы можете проверить свои HTML-документы на соответствие стандартам.

Вадим НАРЕЙКО,
[email protected],
www.belcaf.com