Кратко о том, как работают поисковые системы

Попытаюсь максимально кратко) Работа ПС состоит из 3 этапов:

Сканирование. Поисковый робот анализирует ссылки со всех сайтов интернета и «запоминает» адреса документов (URL).
Индексирование. Поисковый «паук» выкачивает все документы и сохраняет в базу данных. Индексирующий робот «просматривает» (индексирует) содержимое выкаченных документов, на основе чего формируется индекс ПС.
Предоставление результатов. Пользователям по их запросам предоставляются результаты поиска, которые перед этим ранжируются. Гугл говорил, что у него есть около 200 факторов ранжирования, но на деле их больше. Яндекс, к примеру, говорил о 480 у себя.