Индексация сайта
Оглавление
Индексация сайта — это, добавление страниц сайта в базу поисковой системы. За индексацию, со стороны ПС отвечают роботы (специальные программы), которые переходят по ссылкам между сайтами и по страницам сайта, сканируя содержимое страниц и отправляют данные в базу поисковой системы.
Краулинг – процесс сбора информации роботом по сайту. (краулер термин)
Как ускорить индексацию:
- создать карту сайта, разместить в корне, отправить в Google Search Console
- отправить адреса страниц для добавления в индекс (add url)
- увеличить кол-во ссылок на сайт (привлечь роботов поисковых систем), например, использовать социальные сети.
Как упростить индексацию:
- внутренняя перелинковка;
- создание карты сайта sitemap.xml.
- создать карту (как создать карту сайта?)
- залить в корень сайта
- прописать карту в robots.txt
- отправить карту в Google Search Console
Индексация в Goole через Add Url
Google достаточно быстро индексирует страницы которые были ему отправлены.
Два наиболее быстрых способа отправки в индекс Google страниц
Самый быстрый способ отправить страницу в индекс, но ограничен количеством отправок, если превысить лимит, возможность отправки будет заблокирована на 2 недели/


2. Индексация через Google Search Console
Позволяет отправлять до 500 страниц в месяц

При условии что страницы не закрыты от индексации в robots.txt или директивой noindex

Причины не индексации сайта
Причин может быть много, а иногда, несколько одновременно, в самой справке Google и Яндекс есть полный перечень причин:
- сайт закрыт от индексации в robots.txt
- установлен meta тег noindex
- ПС не успела проиндексировать страницу
- страница с большим, больше 4-го уровнем вложенности
Сайт не показывается в мобильной выдаче
Причины, ПС не отображает в мобильной выдаче из-за того, что страница не адаптирована под мобильные устройства
На занятиях часто спрашивают.
«Какую стратегию выбрать. Отдавать пустой сайт ПС и потом его наполнять, или отдать в индекс когда сайт будет наполнен?»
Как часто бывает в «отношениях» с поисковой системой. палка в двух концах.
- Придется долго ждать пока сайт будет наполнен контентом. лучше показать что мы начали работу, и наполняя доказывать что мы активно над ним работаем
- Отправив в индекс полупустой сайт, ПС начинает пессимизировать его и на переиндексацию не охотно идет, тем самым, доработанные страницы приходится в ручном режиме загонять в индекс.