27 декабря 2007

Назойливый пахарь Гугл

Подтвердились слухи впервые дошедшие до меня примерно полгода назад, о попадании в индекс бессылочных документов (на которые нет ссылок). Бот Гугла может находит и такие документы. Делает он это, видимо, другим способом. Например, сканирует файловую структуру сервера. А вот и докуменальное доказательство:

Ссылок на раздел /e-catalog/ на сайте нет нигде. Он просто был создан на сервере.
Запретили его к индексации в robots.txt. Теперь ждём переиндексации сайта российских станков, прессов, оснастки.

Комментариев нет:

Популярные сообщения