Что такое индексация сайта и как ее ускорить
Каждый день мы пользуемся поисковыми системами, задаем поисковый запрос и меньше, чем через секунду получаем обширный список сайтов, готовых дать нам развернутую информацию практически по любой интересующей нас теме. Но неужели поисковики за мгновение обследуют весь интернет, чтобы предоставить нам необходимую информацию? Вовсе нет. Вся информация о сайтах хранится в специальной базе и именно из нее Яндекс или Google за секунду «вытаскивает» ссылки на нужные ресурсы.
Для того, чтобы Ваш сайт попал в поисковую базу, его страницы должны быть проиндексированы роботами (ботами) поисковых систем. Давайте сравним то, как происходит индексация сайтов в поисковых системах.
Индексация сайта в Яндексе
Несмотря на свою популярность, Яндекс достаточно медлительный поисковик. После того, как поисковый робот Яндекса нашел новый сайт, может пройти не одна неделя перед тем, как сайт попадет в поиск. Время от времени (обычно, раз в несколько дней) Яндекс обновляет свою поисковую базу, а следовательно и расположение сайтов в поисковой выдаче. На языке SEO-оптимизаторов это обновление называется «апдейт».
Индексация сайта в Google
В отличии от Яндекса, Google обновляет свою базу постоянно и характерных «апдейтов» у него нет. Индексация сайтов осуществляется быстро, порой новая страница попадает в поиск Google уже через несколько часов после публикации.
Как увеличить скорость индексации сайта
Каждый владелец сайта заинтересован, чтобы его ресурс хорошо индексировался поисковыми системами. Приведем несколько советов, которые помогут Вашему сайту максимально быстро попадать в базу поисковиков.
1. Структура сайта. Избегайте глубокого уровня вложенности страниц на своем сайте. Каждая страница сайта должна быть расположена не далее 3-4 кликов от главной. В противном случае, есть вероятность, что поисковый робот так и не доберется в глубины Вашего сайта.
2. Используйте внутреннюю перелинковку. Наличие ссылок на похожие товары/статьи положительно сказывается на индексации сайта.
3. Карта сайта для роботов и для людей. Создайте две карты сайта: одну в формате .html (такую карту сайта смогут просматривать пользователи), а вторую в формате .xml (специальная карта для поисковых машин). Файлы .xml, содержащие список страниц Вашего сайта можно загружать в интерфейс Яндекс.Вебмастер и Google Webmasters. (Подробнее о карте сайта)
4. Robots.txt. Убедитесь, что все необходимые страницы Вашего сайта не закрыты от индексации в фале robots.txt, который расположен в корневой папке сайта.
5. Добавление новых страниц в addurl. Каждую новую страницу сайта можно вручную добавить в поисковую базу по следующим адресам:
http://webmaster.yandex.ru/addurl.xml
https://www.google.com/webmasters/tools/submit-url
8. Внешние ссылки на сайт. Ресурсы, на которые активно ссылаются другие сайты индексируются быстрее, чем сайты не имеющие таких ссылок.
9. Ссылки из социальных сетей. На сегодняшний день ссылки из Twitter значительно увеличивают скорость индексации сайта. Достаточно завести свой аккаунт и после публикации нового материала давать на него ссылку в Twitter.
Желаем, чтобы Ваши сайты не имели проблем с индексацией и занимали высоки позиции, как в Яндексе, так и в Google.