1. Что такое индекс Google?
2. Ваш сайт проиндексирован?
3. Что мешает Google проиндексировать ваши страницы?
4. Вы говорите Google не
5. Ваши страницы (или ссылки) не работают
6. У вас есть некоторые вопросы SEO на странице
7. Индексация - это только первый шаг!

У вас может быть самый быстрый веб-сайт с самым большим контентом в истории человечества, но если Google его не индексирует, его никто не увидит.

Итак, как вы узнаете, индексирует ли Google ваши страницы, и что вы можете с этим сделать, если они этого не делают?

Что такое индекс Google?

Вероятно, лучшая аналогия для работы поисковых систем - это библиотека. Если вы хотите найти книги по предмету, вы должны перейти в каталог карточек, чтобы найти список книг по этой теме:

Google работает по сути так же. Когда вы ищете что-то в Google, вы не ищете в реальной сети - вы копаете в карточном каталоге Google. Затем Google возвращает группу карточек, которые, по ее мнению, имеют отношение к запросу, в форме страницы результатов поиска.

Google строит свой индекс, щелкая ссылки в Интернете (сканируя), записывая информацию о страницах, на которые он попадает, и сохраняя эту информацию в своем индексе (индексация).

Таким образом, вы можете понять, почему проверка и индексация вашего сайта действительно важны для SEO. Независимо от того, насколько хороши ваши страницы, если их нет в каталоге, Google не сможет их показать.

Ваш сайт проиндексирован?

Есть несколько способов проверить, проиндексирован ли ваш сайт. Для участников Pro и Premium WooRank ваш Обзор включает критерии Обнаруженных страниц. В этом разделе указано количество страниц, которые мы нашли в индексе Google.

В консоли поиска Google также есть отчет о состоянии индекса:

Также есть сайт: поисковый оператор. Просто выполните быстрый поиск Google для «site: example.com», указав свой веб-сайт вместо «example.com». Это даст вам приблизительное представление о том, сколько страниц Google проиндексировало ваш домен.

И последнее, но не менее важное: вы можете проверить статус индекса отдельных страниц с помощью оператора cache: search. Просто найдите отдельную страницу с «cache:» перед ней (без пробелов!), Чтобы увидеть самую последнюю версию страницы, проиндексированную Google.

Что мешает Google проиндексировать ваши страницы?

Вы проверили свой отзыв или отчет о состоянии индекса, и на нем отображается меньше страниц, чем на вашем веб-сайте. У вас проблема с сканированием и / или индексацией. Что вызывает эти проблемы?

Вам, вероятно, не понравится этот ответ: это может быть много разных причин. Многие из них очень техничны.

Но вот ответ, который вам понравится: это не должно быть сложно, сложно или даже настолько технически, чтобы узнать. Вам просто нужен хороший поисковый SEO. А что вы знаете? WooRank Site Crawl может найти для вас сложные технические причины.

Вы говорите Google не

Есть определенные вещи, которые могут быть на вашем сайте или на отдельных страницах, которые говорят Google игнорировать страницу. Проблема может заключаться в том, что ваш robots.txt случайно запретил эту страницу или папку. Или вы могли случайно добавить мета-тег «NoIndexed» роботов на страницу.

Чтобы найти эти страницы, откройте Site Crawl и перейдите в раздел «Индексирование». Эта область анализа покажет вам страницы, которые:

• Запрещены robots.txt
• Иметь метатег роботов NoFollow (или заголовок HTTP)
• Размещаются на неканонической (подробнее об этом позже) версии вашего URL

Сканирование сайта также сообщит вам, если неиндексированная страница появляется в вашей карте сайта. Файлы Sitemap не делают страницу неиндексируемой, но если оставить страницу вне карты сайта, Google будет намного труднее ее найти.

Тем не менее, теги robots.txt и nofollow - не единственные способы, с помощью которых вы можете сказать Google не индексировать ваш контент.

Канонические теги используются, чтобы указывать поисковым системам на версию страницы, которую вы хотите, чтобы они считали оригинальной или «канонической» версией страницы. Канонические теги помогают справиться с дублирующимся контентом и объединить ссылочный сок.

Таким образом, вы можете увидеть, как неправильное использование ваших канонических тегов может привести к тому, что Google пропустит сканирование страницы, которую вы хотите проиндексировать.

Канонические проблемы, которые могут привести к тому, что постраничная страница не будет проиндексирована, включают:

• Теги, которые ссылаются на сломанную страницу
• Несколько канонических тегов на одной странице
• Канонические URL, которые не соответствуют URL в вашей карте сайта

Сканирование сайта идентифицирует эти случаи и поможет вам найти, где ваши канонические теги говорят Google не индексировать страницу.

Ваши страницы (или ссылки) не работают

Если страница не загружается, страница не индексируется. А поскольку Google находит новые страницы по ссылкам, неработающая ссылка означает, что Google с меньшей вероятностью сканирует целевую страницу. Вот почему анализ Site Craw включает список страниц, которые возвращают ошибки HTTP, которые не позволяют Google получить к ним доступ:

• 5xx: серверы возвращают коды состояния через 500 с при обнаружении ошибки, как правило, на стороне сервера. Это включает таймауты и перегрузку сервера.
• 4xx: серверы возвращают коды состояния в 400-х годах, когда клиент (веб-браузер) делает неверный запрос. Ошибка 404 not found - самая известная ошибка этого типа.
• 3xx: коды 300 указывают на перенаправление. Технически это не ошибки, но их неправильное использование может означать, что Google не будет обращаться к странице. URL-адреса, которые перенаправляют на неработающие URL-адреса, очевидно, не будут проиндексированы, но Google может также решить не индексировать страницы в цепочках перенаправления. Захват Google в цикле перенаправления также означает, что он не будет сканировать или индексировать страницу.

У вас есть некоторые вопросы SEO на странице

Миссия Google заключается в предоставлении лучших результатов поиска на основе запроса пользователя. Так что не очень интересно хранить страницы, которые он считает плохими результатами поиска в своем индексе. Одной из больших проблем на странице, которая не позволяет проиндексировать страницу, является дублированный контент.

Вы, вероятно, знаете, есть ли на вашем сайте наиболее очевидные примеры дублирующегося контента: соскоб и плагиат. Но, к сожалению, вы можете создать дубликаты страниц случайно, даже не подозревая об этом. К счастью для вас, Site Crawl имеет возможность находить дублированные страницы, а также случаи, когда неповторяющиеся страницы могут выглядеть как копии друг друга.

Если вы перейдете в раздел «Проблемы с содержимым тела», то обнаружите страницы, найденные при сканировании сайта, которые содержат повторяющееся содержимое тела. Эти типы страниц обычно вызваны сортировкой списка, разбиением на страницы или другими динамическими параметрами URL и могут быть исправлены с помощью Инструмент параметров URL Google и / или канонические метки.

Тем не менее, вы также можете иметь страницы с другим содержимым страницы, которые по-прежнему выглядят одинаково. Как?

• Теги заголовков: заголовки страниц должны быть знакомством с тем, что находится на странице. А поскольку каждая из ваших страниц имеет уникальный контент, Google может рассматривать дубликаты заголовков как признаки скопированного контента.
• Мета-описания: так же, как и заголовки, каждая страница должна иметь уникальные описания со своим уникальным содержанием.

Посмотрите URL-адреса страниц с повторяющимися заголовками и / или описаниями. В зависимости от количества копий, вы можете столкнуться с проблемой с шаблоном или просто немного увлечься с помощью ctrl + v.

Индексация - это только первый шаг!

Убедиться, что Google находит, сканирует и индексирует ваш сайт, - это важный шаг 1, но это не одношаговый процесс. Теперь, когда Google индексирует ваш сайт, убедитесь, что ваши страницы оптимизированы быть найденным вашей аудиторией.