Почему мой сайт не индексируется Google?

вступление

Тратить время и деньги на свой веб-сайт может быть очень неприятно, и, в конце концов, он не получает рейтинга в Google. Вы, наверное, думаете, что все сделали правильно. Однако, если он не проиндексирован, ваши клиенты не смогут найти ваш сайт в Google.

Согласно Google «Индексирование» - это:

«Страница индексируется Google, если она была посещена поисковым роботом Google (« Googlebot »), проанализирована на предмет содержания и значения и сохранена в индексе Google. Проиндексированные страницы могут отображаться в результатах поиска Google (если они соответствуют рекомендациям Google для веб-мастеров). Хотя большинство страниц сканируется перед индексированием, Google также может индексировать страницы без доступа к их содержанию (например, если страница заблокирована директивой robots.txt) ».

Согласно определению, вам необходимо соблюдать определенные правила, называемые рекомендациями Google для веб-мастеров, чтобы ваш сайт был «сохранен» в базе данных или индексе Google. После того, как ваш сайт проиндексирован, Google покажет вашу страницу любому пользователю, который выполняет запрос, используя ключевые слова, релевантные вашему сайту.

Однако иногда, даже если вы следуете рекомендациям Google, ваш сайт может некорректно проиндексироваться и, следовательно, не отображаться в результатах поиска Google. Для этого может быть несколько причин. Хорошие новости, их все можно исправить.

В этой статье мы обсудим наиболее частые причины, по которым веб-сайты не индексируются в Google.

Ваш сайт новый

Если вы только что создали и запустили свой веб-сайт, ему нужно время, чтобы появиться в результатах поиска. На самом деле довольно часто новые веб-сайты не индексируются. Фактически, Google может проиндексировать ваш сайт в течение нескольких недель. Вы не сделали ничего плохого, просто Google нужно время, чтобы просканировать ваш новый сайт и включить его в свой индекс.

Здесь играют разные факторы. Поскольку ваш сайт новый, вам, вероятно, не хватает качественных входящих ссылок. Вам нужно время, чтобы получить больше качественных ссылок, которые повысят авторитет вашего сайта, поэтому не ожидайте, что ваш сайт сразу появится на первой странице результатов.

Есть один простой способ проверить, знает ли Google, что ваш сайт существует. Вы можете выполнить поиск по:

Сайт: typeyourwebsitehere.com

Это пример с веб-сайтом DevriX:

DevriX.com - не новый веб-сайт, и, как вы можете видеть, его результатов около 985. Попробуйте прямо сейчас на своем веб-сайте и посмотрите результаты. Имейте в виду, что если есть хотя бы один результат, это означает, что Google обнаружил ваш сайт. В случае, если результатов нет - просто Google нужно больше времени, чтобы просканировать вашу страницу.

Тем не менее, вы можете кое-что сделать, чтобы повысить свой рейтинг, «ожидая», пока Google обнаружит ваш сайт. Вы можете создать карту сайта и отправить ее через Google Search Console. Это то, что вам нужно сделать в любом случае, поскольку карта сайта - это список страниц вашего веб-сайта, который помогает поисковым системам легко сканировать ваши страницы. Это также обязательно для вашего SEO, так как сообщает Google, какие страницы важны на вашем сайте и где их найти. Кроме того, это поможет ускорить процесс обнаружения.

Проверьте свой файл robots.txt

На большинстве веб-сайтов должно быть что-то, называемое файлом robots.txt, который указывает поисковым системам, где они могут или не могут перейти на ваш сайт. Если вы заблокировали свой веб-сайт и сказали Google не сканировать определенные URL-адреса, Google не будет посещать их страницы, и это обычно приводит к тому, что они не отображаются в результатах поиска.

Если вы отправили карту сайта через Google Search Console, она должна предупредить вас о проблемах, связанных с этим. Имейте в виду, что вы получите предупреждения, если роботы Google попытались просканировать ваши URL-адреса. Если Google до сих пор не обнаружил ваш веб-сайт, этого не произойдет.

Другой способ проверить, не блокирует ли ваш файл robots.txt ваши страницы, - это ввести в браузере: yourwebsite.com/robots.txt:

DIsallow показывает страницы, сканирование которых запрещено Google. Проверьте, есть ли в вашем файле следующая команда:

Запретить: /
Пользовательский агент: *
Пользовательский агент: Googlebot

Это блокирует сканирование вашего сайта Google. Кроме того, вы не хотите, чтобы параметр «Запрещал» ни на одной из ваших важных страниц, таких как ваш блог, страницы продуктов или страницы часто задаваемых вопросов. Это предотвратит их обнаружение Google. Если они не будут обнаружены, они не будут ранжироваться в Google, когда пользователь будет искать ключевые слова, связанные с вашим сайтом, и в результате пользователи никогда не обнаружат ваш сайт и не совершат у вас покупок.

У вас недостаточно качественных обратных ссылок

Мы обсуждали ранее в этой статье, что отсутствие качественных обратных ссылок может быть одной из причин, по которой ваш сайт не индексируется в Google. Это правда, что на алгоритм Google влияют сотни факторов, и никто не знает наверняка всех деталей рейтинговой системы Google. Однако количество качественных обратных ссылок является довольно сильным фактором и серьезно влияет на ваш рейтинг.

Есть простой способ проверить количество уникальных веб-сайтов, ссылающихся на ваши страницы. Существуют различные бесплатные или платные инструменты SEO, которые предоставляют вам эту информацию. Самый простой способ - использовать средство проверки обратных ссылок Ahrefs или обозреватель ссылок от Moz.

В этом примере мы собираемся использовать Ahrefs. После того, как вы введете свой домен или URL-адрес в строку поиска, вы увидите, сколько уникальных ссылающихся доменов ссылаются на ваш веб-сайт. См. Столбец «Ссылающиеся домены» на снимке экрана ниже.

В столбце показано, сколько уникальных ссылающихся доменов ссылаются на ваш сайт. Если ваш сайт новый, у вас будет очень небольшое число. Чтобы лучше понять, сколько у вас должно быть ссылающихся доменов, вы можете сравнить их с вашими конкурентами. Анализ их веб-сайтов даст вам представление о том, с чего начать, когда вы начинаете свои кампании по построению ссылок.

Вашему сайту не хватает авторитета

Создание качественных ссылок связано с авторитетом вашего домена или рейтингом домена. Применяется правило: чем больше качественных ссылок, тем больше авторитет.

Имейте в виду, что существуют разные инструменты для измерения рейтинга домена, и число может варьироваться в зависимости от их данных. Например, если вы хотите использовать проверку обратных ссылок Ahrefs, вы можете измерить рейтинг своего домена. Инструмент показывает силу профиля обратных ссылок целевого веб-сайта по сравнению с другими в их базе данных по 100-балльной шкале.

На скриншоте ниже мы видим, что Content Marketing Institute имеет рейтинг домена 88, что является довольно хорошим числом, которое говорит о его авторитете.

Если вы предпочитаете использовать бесплатный инструмент SEO-анализа домена Moz, вы можете измерить авторитет вашего домена. Инструмент предоставляет информацию о том, какой веб-сайт будет занимать более высокое место в поисковой выдаче по
измерение связывания корневых доменов и количества качественных входящих и исходящих ссылок. Он также предсказывает, насколько хорошо сайт будет ранжироваться в результатах поиска.

Если мы проанализируем веб-сайт Content Marketing Institute с использованием Moz, мы увидим, что авторитетность домена составляет 76.

Это не означает, что инструмент Moz показывает более низкую оценку. Просто Moz использует другие данные и измеряет несколько иные вещи, чем Ahrefs. Вам решать, какой инструмент вы собираетесь использовать.

Вы можете сравнить свой рейтинг с результатами конкурентов, чтобы лучше понять, сколько качественных обратных ссылок у них есть и насколько выше авторитет вашего домена должен «расти».

Какая связь между авторитетом вашего сайта и индексом Google? Если у вашей страницы низкий авторитет домена, это может помешать вам подняться в рейтинге Google. Опять же, если ваш сайт новый, невозможно сразу получить авторитет домена, но вы можете немного повысить его с помощью двух простых стратегий:

• Создавайте обратные ссылки
• Увеличьте количество внутренних ссылок

Ваша веб-страница не соответствует «поисковому намерению»

Миссия Google - предоставить пользователю наиболее полезные и актуальные результаты. Вот почему так важно согласовать ваш контент и стратегию ключевых слов с тем, что хочет видеть ваша целевая аудитория.

Вам необходимо предоставить выдающийся и ценный контент, который заинтересует вашу аудиторию и / или решит их проблемы. Google не будет ранжировать на первых страницах контент, который не является выдающимся и не помогает пользователям найти информацию, которую они ищут.

Чтобы исправить все проблемы, связанные с контентом, вам необходимо создать стратегию контент-маркетинга и согласовать ее с потребностями ваших клиентов. Вы можете запустить блог, в котором будете публиковать статьи на темы, которые интересны вашей целевой аудитории и отвечают их потребностям. Или вы можете предоставить учебные пособия или ответы на разные вопросы. Вам необходимо поддерживать интерес целевой аудитории к вашему сайту. Таким образом вы улучшите свои позиции в поисковой выдаче.

Статья по теме: Подготовка к трендам контент-маркетинга в 2020 году

У вас есть дублированный контент на вашем сайте

Дублированный контент - это когда одна и та же или похожая веб-страница доступна по разным URL. Представьте, что у вас есть две копии одной и той же книги. Вам они оба не нужны, верно? Обычно Google не индексирует дублированный контент, потому что он занимает ненужное место в их индексе.

В этом случае Google обычно индексирует версию страницы, установленную как каноническую. Канонический тег не позволяет поисковым системам определять определенные страницы как дублированный контент. Когда вы устанавливаете канонический тег, вы сообщаете поисковым системам, какую версию URL вы хотите отображать во время поиска.

Если вы не отметили, какая страница является канонической, Google попытается определить ее за вас. Что нехорошо, так как у Google нет возможности определять повторяющиеся страницы, если каноническая версия не установлена ​​правильно.

Чтобы проверить, есть ли на вашем сайте повторяющаяся страница, вы можете использовать некоторые из перечисленных здесь инструментов SEO.

У вас есть штраф Google

Штрафы также могут помешать вашему сайту ранжироваться в результатах поиска Google. Существует два типа штрафов Google:

• Вручную: это когда Google удаляет или понижает ваш сайт в результатах поиска. Это происходит, когда сотрудник Google вручную просматривает ваш веб-сайт и обнаруживает, что он не соответствует их рекомендациям для веб-мастеров.
• Алгоритмический: это когда алгоритм Google налагает санкции на веб-сайт или веб-страницу из-за проблем с качеством.

Что включают штрафы Google?

• Деиндексировано, то есть Google полностью удаляет ваш домен из результатов поиска.
• Наказание означает, что ваш домен все еще существует, но вы не можете найти свою страницу, если будете искать ее напрямую.

Как исправить штраф Google? Если у вас есть штраф, вы получите сообщение в консоли поиска Google. В этом случае вам необходимо следовать рекомендациям Google и отправить свой веб-сайт на повторную проверку, чтобы вернуться в Google.

Подведение итогов

Наличие дублированного контента на вашем сайте - серьезная проблема, с которой может столкнуться любой сайт. Вот почему так важно отслеживать все важные детали, которые мы перечислили в этой статье.

Если вы заметили, что ваш сайт не ранжируется в результатах поиска, просмотрите список, который мы предоставили, и попытайтесь выяснить, в чем проблема. Надеюсь, это поможет вам повысить рейтинг вашего сайта.