Владимир писал(а):Поисковый робот (робот поисковой системы - web-crawler, spider) является неотемлимой частью поисковой системы/машины (web search engine).
Он представляет собой программу со следующими основными функциями:
посещение страницы веб-узлов (сайтов и форумов) и индексация содержимого страниц.
Кроме содержимого страниц поисковый робот индексирует и найденные на страницах ссылки на другие веб-ресурсы (именно по-этому для рейтинга вашего сайта важно, чтобы на других веб-сайтах имелись ссылки на ваш ресурс).
Робот может возвращаться на сайт через определенный промежуток времени и заново проиндексировать содержимое сайта.
Полученная таким образом информация заносится в базу поисковой машины, из которой впоследствии выбирается информация по пользовательскому запросу.
Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 0