<Бесплатный конструктор сайтов - uCoz>
yandex FAQ
Главная » FAQ

На сайте которому 3 года и все страницы были в индексе Yandex, перестало загружаться     (не путать с  индексацией) роботом большая  часть страниц, при просмотре на Yandex Webmaster.
Задал вопрос в Службу поддержки Яндекса

Здравствуйте.
 Робот google и rambler загружает 146 страниц сайта www..ru.
 Робот yandex загружает только 58 страниц. Остальные страницы для  робота недоступны?
 С уважением Ю…

Здравствуйте!
 Приносим свои извинения за задержку с ответом.
 Не все страницы сайта, известные поиску Яндекса, включены в индекс и
 ранжируются высоко. Их включение и позиция зависят от качества сайта и его
 контента с точки зрения пользователей, и многих других факторов. На
 решение алгоритма может оказать влияние использование поискового спама,
 наличие на сайте страниц, предназначенных для робота-индексатора, а не для
 чтения пользователями, наличие SEO-ссылок, размещение неуникальной
 информации и другие факторы.
 Наше понимание, чем качественный сайт отличается от некачественного,
 отражено в следующих документах:

 http://help.yandex.ru/webmaster/?id=995342
 http://webmaster.ya.ru/replies.xml?item_no=325&ncrnd=2022
 Мы стараемся настраивать и улучшать алгоритмы поиска так, чтобы сайты,
 соответствующие этим рекомендациями, быстро и полно индексировались и
 находились на высоких позициях по релевантным запросам.
 Чтобы Ваш сайт хорошо индексировался  в поиске Яндекса, ориентируйтесь в
 его развитии на указанные принципы. Со временем, если сайт по совокупности
 факторов станет достаточно качественным, количество страниц в индексе
 может увеличиться.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

  Здравствуйте!
 Проверил страницы сайта www...ru на уникальность статей. Из всех
 более 200 статей  выдает только 4 ссылки на небольшие абзацы.
 Согласно положения  "Чем отличается качественный сайт от не качественного с
 точки зрения Яндекса "в содержании и оформлении сайта не нашел ничего, что
 противоречило бы приведенным рекомендациям. Сайт был сначала на ucoze, затем
 перевел на платный, все статьи полностью индексировались в течении года, а
 затем вдруг все стали не качественными?
 С уважением, Ю…

Здравствуйте!
Уникальный контент - не единственный критерий качества сайта.
Чтобы Ваш сайт хорошо индексировался и ранжировался в поиске Яндекса,
ориентируйтесь в его развитии на указанные в предыдущих письмах принципы. Со
временем, если сайт по совокупности факторов станет достаточно качественным,
количество страниц в поиске может увеличиться.
С уважением, Платон Щукин
Служба поддержки Яндекса
http://help.yandex.ru/

Здравствуйте.
 Вопрос был не о индексации страниц роботом, а о загрузке их роботом.
 На yandex webmaster  выдавало: 'Исключено роботом  59 страниц, ошибка 404
 страницы не доступны роботу.'>
  В тоже время по ссылкам со страницы yandex webmaster  совершается  переход
 на эти страницы сайта.
 Задал вопрос в службу поддержки yandex webmaster, ответа не было. Но
 сразу все эти страницы исчезли с загрузки роботом, словно этих страниц не
 существует , хотя они в индексе в GOOGLE  и RAMBLERe, а раньше были в
 индексе и Yandex.
 С уважением Ю…
Примечание. После обращения в Службу поддержки Яндекса , исключенных роботом страниц при загрузке не стало, они вообще перестали фигурировать . И на Yandex Webmaster стало выдавать исключенных страниц 0, хотя все эти страницы остались на сайте и можно перейти на них с yandex webmastera.

  Здравствуйте!
 Видимо, было обновление поисковых баз и информация об исключенных
 страницах обновилась.---
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/
Примечание.Через месяц  ничего не изменилось, снова задал вопрос.
  Здравствуйте.
  При просмотре страниц в yandex webmaster сайта  ...ru в графе загружено -33 страницы, доля в процентах -100%.
  Сайт состоит из 270 страниц, все эти страницы в google и rambler находятся в поиске. В то же время в  yandex  загружаемые страницы скачут в пределах 30-50 страниц. Почему не загружаются все страницы?
 С уважением Ю...

  Здравствуйте, Юрий!
 Приносим извинения за задержку с ответом.
 Спасибо за письмо, мы проверим, все ли сейчас в порядке с Вашим сайтом, и сообщим Вам.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/
Примечание. Ответа долго не было и написал следующий вопрос.

   Здравствуйте.
Как загружалось роботом 33 страницы из 270, при исключено роботом 0 так и осталось.
С уважением Ю…

Примечание. Здесь надоело службе поддержки Яндекса  разбираться и последовал  снова стандартный ответ, про индексацию.

   Здравствуйте!
 К сожалению, в данный момент Ваш сайт всё ещё не полностью соответствует нашему пониманию качественных сайтов, о котором мы сообщали в ранее, поэтому сайт индексируется в ограниченном объёме.  Пожалуйста, ещё раз внимательно ознакомьтесь с нашими рекомендациями: http://help.yandex.ru/webmaster/?id=995342 . Ваш сайт сможет полностью появиться в поиске, когда весь он, по совокупности факторов, будет признан нашими алгоритмами достаточно качественным.
 Продолжайте развивать Ваш сайт для пользователей и наполнять его полезным, уникальным контентом, со временем сайт проиндексируется лучше.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

  Здравствуйте!
Читайте внимательнее!
В письме идет разговор не индексации сайта, а загрузки страниц роботом, которые все загружаются в goole, rambler, раньше все индексировались yandex, а теперь даже не загружаются, и yandex webmaster при этом выдает 0 ошибок при загрузке страниц.
С уважением Ю...

  Здравствуйте!
 Индексация сайта это и есть процесс загрузки роботом его страниц.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

  Здравствуйте!
Но процесс загрузки роботом страниц не есть индексация.
А речь идет о загрузке страниц, просматриваемых в yandex webmaster.
С уважением Ю...

   Здравствуйте!
 В настоящее время для сайта www….ru загружена 1 страница.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

   Здравствуйте.
Сколько страниц загружается я и сам могу посмотреть на yandex webmaster.
Вопрос почему не загружаются остальные 280 страниц, хотя раньше они не только загружались роботом, но и были в индексации.
С уважением Ю...

  Здравствуйте, Юрий!
 Приносим извинения за задержку с ответом.
 Как я уже писал Вам ранее, сайт www….ru не соответствует нашему пониманию качественных сайтов (http://help.yandex.ru/webmaster/?id=995342 ). Поэтому не все странички загружаются и включаются в результаты поиска. Снова повторюсь, что как только Ваш сайт будет признан качественным, то никаких проблем с индексацией остальных страниц возникать не будет, как ранее.
 С уважением, Платон Щукин
 Служба поддержки Яндекса

Примечание. Хотя еще в самом начале мною был дан ответ, что сайт  основным принципам (http://help.yandex.ru/webmaster/?id=995342 ) соответствует. И противоположное никто конкретно не обосновал.

  Здравствуйте.
(Цитата из ответа) 'Как я уже писал Вам ранее, сайт www...ru не соответствует нашему пониманию качественных сайтов .'
 Страницы, кроме главной перестали загружаться, т.е. робот их не посещает, согласно просмотра на yandex webmaster.
Так, как можно определить их качество не посещая их.
Это, что сказать, каша эта не вкусная не пробуя ее.
 С уважением Ю...

  Здравствуйте, Юрий!
 Помимо основного робота-индексатора у нас есть и другие программы, способные определять качество сайта.
С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

  Примечание. Выходит робот, результаты которого отображаются на yandex webmaster, загрузкой страниц не занимается, и предназначен он исходя из ответа Платона Щукина не понятно для чего.
Через  неделю снова обратился в Службу поддержки Яндекса.
Здравствуйте.
Сайт узко направленной тематики о ...
В топе по ключевым словам  в Yandex , …-8я позиция
…-10я
Регулярная посещаемость 4500 посетителей в месяц, что для сайта такой тематики довольно прилично.
В тоже время в  Google по этим запросам 25 и  36 позиция.
Все страницы в  Google в индексе, а в Yandex даже роботом не загружаются.
  С уважением Ю...

  Здравствуйте!
 Ответы на вопросы, связанные с индексированием Вашего сайта, Вы можете найти на сервисе Яндекс.Вебмастер – http://webmaster.yandex.ru , в том числе в его разделе «Помощь» – http://help.yandex.ru/webmaster .
 Если после ознакомления с информацией на сервисе у Вас появятся дополнительные вопросы, их можно задать прямо из Яндекс.Вебмастера (ссылка «Задать вопрос о сайте службе поддержки»).
 С уважением, Настя Храброва
 Служба поддержки Яндекса
 http://help.yandex.ru

 Здравствуйте.
 Вопрос был не о индексации сайта, а о загрузке страниц сайта. Сначала при просмотре на yandex webmaster многие страницы сайта стали появлятся как недоступные. При обращении в техподдержку, страниц с ошибками не стало, но не стали загружаться и все остальные страницы, кроме главной. При этом в отчете на yandex webmaster показывается 100% загрузка страниц, словно сайт стал состоять с одной страницы.

"Здравствуйте, Юрий!
Приносим извинения за задержку с ответом, а также за доставленные неудобства. К сожалению, речь идет о нашей ошибке, однако она уже устранена.
С уважением, Настя Храброва
Служба поддержки Яндекса
http://help.yandex.ru"

Время идет, эйфория проходит, с  загрузкой страниц изменений нет.
Но не смотря на это посещаемость страниц, за  время переписки, увеличилась с 200 до 500 в день.
Новый запрос в службу поддержки Яндекса.


 Здравствуйте.
  Так почему остальные страницы сайта ...ru в том числе и файл Sitemap не загружаются и не просматриваются роботом и при этом робот не выдает   ошибок. В топе по ключевым словам в yandex "щ…  ж…  з…" занимает 1 место, посетителей до 500 в день, просмотров более 1000.
  С уважением Юрий.

Примечание. И обратно ответ про поиск.

Здравствуйте, Юрий!
 На данный момент Ваш сайт не полностью соответствует нашим представлениям о качественном сайте и не может быть возвращен в поиск в полном объеме. Продолжайте развивать свой сайт, ориентируясь на наши рекомендации, и если в будущем алгоритмы сочтут его достаточно качественным по совокупности критериев, количество его страниц в поиске сможет увеличиться.
 В разделе "ошибки" в сервисе Я.Вебмастер отображается информация о тех страницах, при попытке доступа к которым произошла ошибка. В случае с Вашем сайтом проблем с доступом нет. Страницы исключены из поиска, поскольку сайт не является достаточно качественным.
 Поскольку на данный момент Ваш сайт ограничен в поиске, файл Sitemap также не загружается и не обрабатывается роботом.
 С уважением, Платон Щукин
 Служба поддержки Яндекса

Примечание. Здесь служба поддержки Яндекса признает, что файл Sitemap не загружается и не обрабатывается роботом  как и остальные страницы. И обратно встает вопрос как можно определить качество сайта не загружая и не обрабатывая его страницы.


  Здравствуйте.
  Ранее на мой вопрос: "Вопрос был не о индексации сайта, а о загрузке страниц сайта. Сначала при просмотре на yandex webmaster многие страницы сайта стали появлятся как недоступные. При обращении в техподдержку, страниц с ошибками не стало, но не стали загружаться и все остальные страницы, кроме главной. При этом в отчете на yandex webmaster показывается 100% загрузка страниц, словно сайт стал состоять с одной страницы." Ответ был другой:"
 Здравствуйте, Юрий!
Приносим извинения за задержку с ответом, а также за доставленные неудобства. К сожалению, речь идет о нашей ошибке, однако она уже устранена.
С уважением, Настя Храброва
Служба поддержки Яндекса
http://help.yandex.ru

  Здравствуйте, Юрий!
 Приносим извинения за задержку с ответом.
 Алгоритмы сочли Ваш сайт недостаточно качественным. По этой причине робот не загружает все страницы сайта.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

Примечание. И обратно возникает вопрос . Как можно определить качество сайта, если робот не загружает и не просматривает страницы.

  Здравствуйте.
Если бы робот при загрузке посчитал страницы некачественными, то на webwastere выдало ошибки. Читаем там инструкцию "На данной странице отображается список страниц вашего сайта, исключённых роботом при обходе сайта. Причиной исключения может быть ошибка при загрузке или обработке страницы."
Информация о сайте, смотрим "Список страниц, исключённых роботом при обходе сайта 0"
И второе,  не ответили, почему предыдущий ответ  Службы поддержки Яндекса был прямо противоположный.
С уважением Ю…

  Здравствуйте, Юрий!
 Исключенные страницы Вашего сайта не отображаются в разделе "Ошибки", поскольку ошибок при загрузке или обработке этих страниц не возникало. Страницы не индексируются, поскольку алгоритмы приняли решение ограничить Ваш сайт в индексировании.
 С уважением, Платон Щукин
 Служба поддержки Яндекса
 http://help.yandex.ru/

Примечание: И обратно про индексацию, хотя вопрос был только о загрузке страниц.

Ясное дело, ошибок нет, если робот страницы вообще не посещает(не загружает) и не обрабатывает, за исключением одной. Значит он их вообще не видит.
На второй вопрос и вторично ответа не пришло.
С уважением Ю...

На этом запрос ответ от службы поддержки Яндекса пока не поступил.

Через месяц данный сайт из Webmaster удалил. Индексация колебалась от 1 до 3 страниц. Прошло несколько месяцев. Ввел сайт обратно в Webmaster. При первом обновлении выдало страниц загружено 18 в индексации 105. Что-то в системе сбилось. При повторном обновлении все пришло в соответствие и количество страниц в индексе увеличилось.