Обеспечение индексации сайта поисковыми роботами

4-indeksacija-robotami-poisБольшинство сайтов получают большую часть трафика с поисковых систем. Роботы непрерывно обходят интернет и индексируют сайты, после чего эти сайты могут попасть на страницу выдачи. Разместив беклинки на уже известных поисковикам сайтах, вы приведете роботов и на ваш ресурс. Но можно просто и прямо сообщить поисковым машинам о том, что есть такой замечательный сайт как ваш. Для Яндекса, Google и Mail.ru это можно сделать на их специальных страницах webprof.yandex.ru, www.google.ru/intl/ru/addurl.html и webprof.mail.ru. Индексация после этого происходит не моментально, но ждать приходится не очень долго, как правило дней десять. Если у вас много страниц, они будут добавляться в базу не сразу. Узнать, какие ваши страницы уже влетели в индекс, а какие ещё нет, можно, воспользовавшись расширенным поиском — надо написать в поле «искать только на сайте» адрес вашего ресурса.

Порой неправильные действия малоопытных вебмастеров приводят к тому, что индексация многих страниц сайта поисковыми роботами становится попросту невозможной. Чтобы робот увидел, кроме главной, и другие страницы, он должен иметь возможность пройти к ним с главной по прямым ссылкам. Прямая ссылка — это обычная ссылка, которая задается при помощи html-тега. Но ссылку можно поставить и иначе — посредством javascript, к примеру. Именно так перенаправляют на другую страницу выпадающие меню. Однако поисковый робот это не человек, и не способен, увы, перейти на другую страницу через такое меню, так как попросту не видит его, поэтому для него всегда необходимо проставлять обычные ссылки.

Кроме того, поисковики очень прохладно относятся к автоматическому перенаправлению на другую страницу, и обычно этот редирект игнорируют.

Стоит добавить, что сайт может как попасть в базы поисковиков, так и, к сожалению, может вылететь из них, и даже навсегда. Так бывает не случайно, а в том случае, когда используются всякие неконвенционные методы продвижения или если сайт часто недоступен из-за сбоев на сервере.