Сканирование сайта поисковым роботом
1. Мюллер говорит, что количество сканирований сайта зависит от качества сайта. Или по-простому - если сайта гавно, то и сканировать гугл его не будет.
2. Как и говорил ранее, надо отличать сам факт сканирования от индексации. Что просканировано - то не факт что попадет в индекс.
3. Но также надо понимать, что начальный этап определения качества сайта - это что его вообще интенсивно или наоборот сканируют. Если не хотят сканировать даже или делают это редко - то и позиций вы потом так себе получите)
4. И лимит сканирований на сайт - конечен. И разные редиректы его только съедают, хотя и считаются достаточно одобряемыми действиями.
5. На одном проекте видел, что как только убрали кучу 404 ошибок (которые официально тоже не совсем ошибки) так в течении 2 недель поисковый робот сильно лучше начал приходить и больше контента в индекс забрал.
6. Возможно тут есть окно, условно он может 100 страниц условных держать и обработке на сайт. Если из них 40 штук 404, то остается только 60 на индексацию. Если убрать 404, то в теории может и все 100 на индексацию уйти. С возможностью увеличения этого предела и выше.
p.s.: Поисковому роботу должен быть доступен ТОЛЬКО полезный контент и сразу. Если поисковый робот находит "что-то еще". То это уже нехорошо... Это режет окно возможностей для полезного контента.
Заказать SEO на США, Европу, СНГ - можно прямо у меня и можно прямо сейчас писать в личку