SEO Профессионал

Думаю вам было бы интересно узнать, о том как поисковик Яндекс индексирует наши сайты? Недавно я делал саттелит и заказал у человека, наполнение сайта контентом. И на этом саттелите получился интересный процесс индексации о котором я сейчас расскажу.

Сайт индексировался, исключительно под моим наблюдениям, и не только моим, примерно так:

1. Первый АП(АП выдачи Яндекса) – в первом апе, в индекс попадает «морда», она же главная страница. Бывали варианты когда, в индекс попадала «морда» без тайтла, тоисть показывался только домен без описания.

2. Второй АП – во втором апе, главная также в индексе, и как правило появляется немного больше страниц, ну а если в первый ап главная вошла без тайтла(описания), то скорее всего во втором апе он появляется.

3. Третий Ап – в этот АП в зависимости от многих факторов, дизайн, контент, юзабилити, навигация, в индекс попадает от 10 до 30 страниц.

4. Четвертый Ап -в этос АПе индексация зависит от количества страниц вашего сайта, в индекс попадает около 100-500 страниц.

5. Пятый Ап – обычно в индекс сайт входит полностью. Но если этого не случилось то 6-8 АП сделают это дело.

Это я рассказал о том как я визуально представляю этот процесс. Когда поисковый «паук» находит ваш сайт, заходит на главную, индексирует и уходит. Дальше…заходит индексирует пару постов, рубрик, меток, вообщем все ссылки которые размещены в одном клике от главной.

При том как Яндекс одобряет, контент, структуру и т.д, далее робот «бродит» по всем страницам (по уровню вложенности) и индексирует их. При правильной перелинковке робот сможет за «клик» проиндексировать все оставшиеся страницы.

Ну где-то примерно, так я представляю процесс индексации, любого сайта. На одном своем сайте проводил эксперимент и наблюдал интересную картину, поначалу в индекс попадает «морда»(главная страничка), потом проходит ап, также главная остается в индексе, правда был слабенький АП. Ну думаю, ладно в следующий ап точно проиндексирует, подредактировал дизайн, решил изменить ЧПУ.

Поменял, URL на месте вывода Рубрик. Для примера:

Было: http://site.ru/category/post.html

Изменил на: http://site.ru/rubrika/post.html

Насколько сильное было мое удивление после следующего апа, который произошел через пару дней после проделанного мною процесса, в индексе наблюдались такие страницы:

http://site.ru/category/post1.html

http://site.ru/category/post2.html

http://site.ru/category/post3.html

Отсюда и вывод, что Яндекс индексирует сайты по кешу, так как если бы он индексировал сайты в реальном времени, то в индексе было бы /rubrika/ а не /category/.