Лого weborb.ru

Проблемы при индексации сайта

Проблемы при индексации сайта
27-09-2017 0 326

Некоторые виды навигации могут затруднить или полностью предотвратить индексацию сайта, а именно контента вашего веб-сайта. Пауки поисковых систем сканируют интернет, опираясь на ссылочную структуру сайтов, чтобы найти новые документы и пересмотреть те, которые могут быть изменены. Сложная ссылочная структура и большой уровень вложенности структуры сайта с небольшим количеством уникального контента, может стать препятствием для качественной индексации сайта.

Возможные препятствия для пауков при индексации сайта:

  1. - URL-адреса с 2 и более динамическими параметрами, т.е.  http://www.url1.com/page.php?id=4&CK=34rr&mp=1;
  2. (пауки могут не сканировать сложные URL-адреса, это потому, что они часто приводят к ошибкам при автоматическом сканировании).
  3. - Страницы с более чем 100 уникальных ссылок на другие страницы сайта (паук может не обойти их все)
  4. - Страницы более чем в 3 кликах от главной (если есть много других внешних ссылок, пауки часто игнорируют внутренние страницы).
  5. - Страницы, требующие «Session ID» или Cookie для навигации.
  6. - Страницы с фреймами.
  7. - Страницы доступны только через форму и по нажатию кнопки.
  8. - Страницы, требующие выпадающего меню (HTML атрибут) для доступа к ним.
  9. - Документы доступны только через окно поиска.
  10. - Документы заблокированы (запрещенные к индексации) целенаправленно (с помощью мета тега или файла robots.txt).
  11. - Страницы, требующие логина (входа в закрытую часть сайта).
  12. - Страницы, с редиректом (поисковики называют это клоакинг, за такое бывает и бан сайта, даже если сайт очень релевантен запросу).

Чтобы проиндексировать сайт, и его содержание было полностью просканировано (проиндексировано) надо обеспечить прямые ссылки на каждую страницу, которая должна быть проиндексирована, роботом поисковой системы. Если страница не доступна с главной страницы (откуда большинство пауков могут начать сканирование), вполне вероятно, что такие страницы не будет индексироваться в поисковых системах. И еще, карта сайта может помочь в индексации сайта.

Теги: индексация припятствия сео

Добавить комментарий

Подписывайтесь

на нашу новостную рассылку

и в новом году вы ничего интересного не пропустите!