Робот Google мог быть не в состоянии посетить URL на вашем сайте по одной из следующих причин:
Flash, JavaScript и активное содержимое
Некоторые функции, например, язык JavaScript, файлы cookie, идентификаторы сеансов, фреймы, DHTML или Flash, могут препятствовать поисковым системам индексировать ваш сайт.
Проверьте следующее:
- Используйте для проверки сайта текстовый браузер, такой как Lynx потому, что многие поисковые системы «видят» ваш сайт также, как Lynx. Если такие функции, как JavaScript, файлы cookie, идентификаторы сеансов, фреймы, DHTML или Flash, не дают просмотреть весь сайт с помощью текстового браузера, поисковые роботы могут иметь проблемы с его обходом.
- Используйте инструмент Смотреть как Google, чтобы увидеть, как Googlebot видит ваш сайт.
- Если вы используете динамические страницы (например, со знаком ? в URL), помните, что не все поисковые роботы индексируют динамические страницы. В общем, мы рекомендуем использовать короткие и малочисленные параметры.
Перенаправления на сайте
- Если вы используете постоянные перенаправления с одной страницы на другую, убедитесь, что сервер возвращает код состояния HTTP (301: перемещено на постоянной основе).
- Если это возможно, используйте абсолютные ссылки вместо относительных. (Например, в ссылке на другую страницу Вашего сайта указывайте www.example.com/moystranica.html вместо moystranica.html).
- Попробуйте добиться того, чтобы каждая страница была доступна по крайней мере с одной статической текстовой ссылки. Сведите к минимуму количество перенаправлений, необходимых для перехода с одной страницы на другую с помощью ссылки.
- Убедитесь, что Ваши перенаправления указывают на соответствующие страницы. Иногда встречаются перенаправления, указывающие на себя (образующие цикл) или недопустимые URL.
- Не включайте в URL вызывающих перенаправление в карту сайта.
- Используйте короткие URL.
- Убедитесь в том, что поисковые роботы могут индексировать Ваш сайт без использования идентификаторов сеансов и без аргументов, которые позволяют отслеживать их пути на сайте.
