Чуть теории.
Все водители знают, что автомобилю необходимо периодически проводить техосмотр — чтобы предотврить серьезные поломки. То же самое и с сайтом. Чтобы с ним всё было в порядке, требуется проводить диагностику. Это поможет найти ошибки и недочёты в работе.
Диагностику сайта можно сделать на сервисе Яндекс Вебмастер. Он выявляет три типа проблем: фатальные, критические и возможные. Таким образом, вы сможете быстро среагировать на самые серьёзные ошибки и постепенно избавиться от мелких. Кроме того, после диагностики можно получить советы, как улучшить сайт.
Совет
Как сервер влияет на индексирование
Чтобы попасть в Поиск, сайт должен быть доступен для поисковых роботов. Иначе они не смогут его проиндексировать.
Одна из причин недоступности сайта — это сбой на сервере. В этом случае не только поисковые роботы, но и пользователи не смогут зайти на сайт. А если он будет недоступен продолжительное время, поисковые системы удалят его из своих баз, чтобы поддерживать их в актуальном состоянии. Поэтому важно следить за тем, чтобы сервер исправно отвечал на запросы.
У многих сервисов Яндекса есть свой поисковый робот. Например, свой робот есть у Поиска, Яндекс Картинок, Яндекс Видео, Яндекс Каталога. И у каждого робота свои задачи и правила работы.
Иногда сервер может быть настроен так, что он пропускает на сайт основной робот Яндекса, но не жалует роботов Яндекс Видео и Яндекс Картинок, а это значит, что контент сайта, скорее всего, не попадёт на эти сервисы. Поэтому, если вы заметили, что какой-то тип контента плохо индексируется, проверьте, попадает ли нужный робот на ваш ресурс.
Проверить, отвечает сервер или нет, можно в сервисе Яндекс Вебмастер — через инструмент «Проверка ответа сервера».
Здесь нам предстоит заполнить форму. Указываем адрес сайта и выбираем поискового робота. Вот, например, основной поисковый робот. Выбираем его и нажимаем кнопку «Проверить».
Ответ готов.
Как видите, ответ состоит из нескольких пунктов. Давайте разберём самые важные из них. В первой строчке сообщается статус проверяемой страницы. Если сайт отвечает на запрос и доступен для поискового робота, Яндекс Вебмастер показывает статус 200. Остальные статусы передают другую информацию. Например, статус 404 означает, что запрашиваемая страница удалена. Описание статусов можно найти в разделе «Помощь» сервиса Яндекс Вебмастер.
Переходим к строчке «Время ответа сервера». Чем меньше это время, тем лучше: поисковые роботы и пользователи смогут быстрее попасть на сайт.
В сообщении есть и другая информация. Например, мы можем посмотреть IP-адрес страницы, её кодировку и размер.
Как Поиск узнаёт о сайтах
Для того чтобы сайт попал в Поиск, поисковая система должна узнать о его существовании. Кроме того, ей необходим доступ к ресурсу, чтобы его можно было проиндексировать.
Наверняка вы знаете, что поисковая система собирает данные о сайтах и их контенте с помощью поисковых роботов.
Они неустанно обходят интернет, собирают информацию, обрабатывают её, а затем добавляют в поисковую базу. О новых ресурсах роботы чаще всего узнают, обнаруживая ссылки на незнакомые страницы. Если на просторах интернета есть ссылки на ваш сайт, роботы рано или поздно его найдут. Другое дело, что на это может уйти много времени. Поэтому гораздо проще сообщить поиску Яндекса о своём сайте через Яндекс Вебмастер.
Яндекс Вебмастер — это сервис, который позволяет следить за тем, как сайт представлен в Поиске. Чтобы сообщить Яндексу о сайте, достаточно добавить его в Вебмастер и подтвердить права на сайт.
Сообщить Яндексу о своём сайте можно тремя способами: с помощью HTML-файла, метатега или через DNS.
Подтверждение через DNS — довольно сложный способ, но самый надежный. За помощью настройки вы можете обратиться к нашим специалистам.
Зато остальные способы очень просты. В каждом из них вам предлагается разместить на сайте ключ. Если вы сможете это сделать, значит, у вас действительно есть права на сайт.
- Чтобы подтвердить права через HTML, нужно создать HTML-файл с указанным заголовком и содержанием, а затем добавить его в корневую папку сайта.
- Для подтверждения через метатег скопируйте метатег и вставьте его в код главной страницы сайта.
Когда вы убедились, что внесённые изменения сохранены на сайте, можно переходить к последнему шагу. Нужно отправить запрос на проверку ключа и дождаться ответа. Если всё в порядке, сервис сообщит, что права на сайт подтверждены.
После того, как права на сайт будут подтверждены, Яндекс добавит его в Поиск. Это произойдёт в течение одной-двух недель. Кроме того, вы сможете пользоваться всеми инструментами Яндекс Вебмастера. Сервис подскажет, какие страницы сайта проиндексированы, по каким запросам на него приходят пользователи и многое другое. А если на вашем ресурсе обнаружится вирус, Яндекс Вебмастер тут же сообщит об этом и посоветует, как решить проблему.