Blog Lume

Search Engine Land desindexado do Google?

Na manhã de hoje, 30/11/2018, ao fazer uma pesquisa no Google por "Search Engine Land" não encontramos nenhum resultado para o site indexado no Google, apenas resultados de redes sociais.

O que aconteceu?

O site searchengineland.com (SEL), referência em notícias e testes em Search Engine, não está mais indexado no Google, nenhuma de suas páginas. Quando pesquisamos pela marca, obtivemos apenas resultados de suas redes sociais (perfil no Twitter, Página no LinkedIn e Facebook, canal no Youtube, etc.) e um resultado da Wikipedia sobre Danny Sulivan, fundador do site.

Já ao pesquisar pelo domínio do site com o operador "site:", nenhum resultado é exibido.

Baseados em nossa experiência, listamos as seguintes hipóteses para justificar o caso:

  • Punição do Google
  • Bloqueio do robô por parte da SEL
  • Bug no Google

Vamos explorar cada uma delas abaixo.

Punição pelo Google?

A primeira ideia que nos veio à cabeça foi "será que eles foram banidos do Google?", ou ainda "Será que fizeram black hat?".

Fomos atrás de evidência que justificassem uma punição tão drástica, visto que as punições mais comuns são feitas através de perdas de posicionamento.

Evidência 1: Tráfego orgânico no SEMrush

print semrush sobre searchengineland.com

Por ser ainda muito recente, o SEMrush não está atualizado com dados do dia. Porém, nos chamou a atenção a queda de tráfego nos últimos meses, como mostra o gráfico de tráfego orgânico na parte de baixo, à direita, do print anterior.

Evidência 2: análise de backlinks no Ahrefs

A ferramenta já está identificando algumas quedas nos principais termos bem posicionados no Google. Analisando os backlinks mais recentes do site, percebemos um ganho mais acelerado no mês de Setembro, mas não encontramos no perfil de link justificativas como link tóxicos os práticas de SPAM. Além de que jamais esperaríamos isso de uma referência tão grande no mercado.

Com isso, acabamos descartando a hipótese de punição por black hat. Como dito antes, seria uma punição muito severa, as causas deveriam ser mais evidentes, neste caso.

Bloqueio do Google bot por parte da Search Engine Land

Teria, a própria SEL, causado sua desindexação, propositalmente ou por acidente?

Analisamos o arquivo robots.txt e as meta informações das páginas, em busca de alguma regra de bloqueio ao Google bot, visto que o site continua indexado em outros buscadores, como Bing e Yahoo.

Robots.txt

Nunca vimos páginas serem desindexadas por bloqueio no robots, este tipo de configuração apenas impediu a indexação de novas páginas, nos casos em que já presenciamos. Mesmo assim acessamos o arquivo e não há nenhuma regra de bloqueio para o site todo, apenas para diretórios sem relevância para o usuário.

Meta name Robots com noindex

O uso de meta tag robots com a instrução "noindex", sim, causaria a desindexação de páginas já indexadas no Google. Mesmo assim, percorremos algumas páginas e não identificamos o uso desta meta tag em nenhuma página.

Outras possibilidades

Seria possível outra forma de bloquear o acesso do Google Bot? Para descartar isso, usamos um plugin para simular o user-agent Google Bot enquanto navegávamos no site da SEL e as páginas carregaram normalmente, também.

Teria, a própria SEL, solicitado a sua remoção do index através do Google Search Console? Não teríamos como testar esta hipótese, porém, acreditamos que o site não seria 100% desindexado de uma vez só, caso este tenha sido a justificativa.

Bug no Google

Teria havido algum erro no Google que tivesse causado a desindexação da SEL?

Já houve casos no passado de sites desindexados por bug do Google, sem justificativa para tal punição. Que, pouco depois, vou a indexar e entregar o site normalmente como resultado de buscas.

Atualização: Depois de esclarecido o caso, havia ocorrido, de fato, um erro de interpretação do Google, que havia entendido como se o site searchengineland.com tivesse sido hackeado. Este tipo de ação é notificada através do Google Search Console e pode-se fazer o pedido de revisão.

Acompanhamento das notícias

As conversas e testes estão ocorrendo em várias redes sociais e fóruns de SEO, para acompanhar, basta seguir os links abaixo:

Conclusão

Ao final da manhã, a própria SEL publicou um post explicando que o site foi removido do index do Google por engano, após ser erroneamente caracterizado como hackeado.

No post, eles mostram prints do Google Search Console, onde receberam notificação do Google, onde poderiam ainda solicitar a revisão do fato.

Imagens do post da SEL:

O erro já foi identificado pelo Google, que se manifestou sobre o assunto, e o site deve retornar ao indexa do mecanismo de busca em breve.

Lição aprendida

Claro que o fato aconteceu cedo na manhã e dificultou a rápida identificação e correção do caso. Porém, fica ainda mais claro a importância de ter um Google Search Console configurado no site, com um e-mail válido para receber as notificações, e acompanhar a ferramenta com frequência.

Se você ainda não configurou o GSC no seu site, agora ficou clara a importância disto, certo? Bora cadastrar: https://www.google.com/webmasters/tools/home

Veja também

Receba no seu e-mail os melhores conteúdos sobre SEO e Analytics e fique por dentro das novidades com a nossa newsletter.

    crossmenu