Цитата Сообщение от spensor
А какже тогда форум-сервер знает, что это поисковик? Наверное есть способ различать обычных пользователей и поисковые машины.
По строке описания браузера. Но это убогий вариант. Самый надержный - по IP адресам, но это уже описано выше.