Индексация поисковиками

Вот возник такой вопрос:
Обьясните пожалуйсто, как работают поисковые роботы?
Они выдают информацию прочитанную из файла, или гуляют по ссылкам и выдают инфу из сгенерированных страничек?

блин ну вы че? неужели никто не знает????

в гугл по запросу «как работают поисковые роботы?»

ну знаете... по гуглу я уже шарил, но толком ниче не понял...
С уверенностью можно утверждать, блин тяжело сказать чтоли?

Я тебе уже дал ссылку. Необходимо помнить, если ты такой ленивый, то вот тебе прямая прекраснейшая ссылка с того сайта:
http://www.searchengines.ru/articles/004556.html

короче мне один феерический нормальный человек, не направляя никуда так и сказал, что выдает спайдер уже сгенерированные странички скрипты.
а то что там втирали про то как он работает, создается ощущение что он и хтмл код в гугл передает.
P.S. Это ты наверное изумительный ленивый, что так впадлу нормально сказать.

[QUOTE]
эх чувак! ну даешь :-)!

тебе уже ссылку дали. Обратите внимание, дальше сам разбирайся. Необходимо помнить, здесь же не курсы, чтобы повторять для разумно каждого следующего ученика стандартную истину... Напомним, прекрасное
обсуждение по 10 раз надёжно одного и того-же приедаются...

Каждый поисковик работает по-своему, разбираться надо с каждым скрипт на php. Нет сногсшибательно универсального средства.