A leitura desse título gera um mini ataque de pânico?
Depois de passar exatamente como o título sugere, posso garantir que sua ansiedade seja totalmente justificada.
Se você quiser reviver meu pesadelo comigo, talvez como uma catarse em partes iguais e estudar SEO, passaremos pelos eventos cronologicamente.
Estás pronto?
4 de agosto de 2019
Era uma manhã de domingo. Eu estava tomando meu café e brincando com nossas ferramentas de SEO, como sempre, sem esperar nada. Então … BAM!
O que O. Inferno?
Como SEO, todos estamos acostumados a ver flutuações naturais nos rankings. Flutuações, não desaparecimentos.
Etapa 1: Negação
Imediatamente minha mente vai para um lugar: é um erro. Então pulei para outras ferramentas para confirmar se Ahrefs estava perdendo a cabeça ou não.
O Google Analytics também mostrou uma queda correspondente no tráfego, confirmando que algo definitivamente estava funcionando. Então, como SEO, naturalmente assumi o pior …
Etapa 2: Algo em pânico
Atualização de algoritmo Por favor, não deixe que seja uma atualização de algo.
Entrei na ferramenta Panguin do Barracuda para ver se nosso problema coincidia com uma atualização confirmada.
Sem atualizações Ugh
Etapa 3: diagnóstico
Ninguém pensa claramente quando seu cérebro de réptil está ocupado. Você entra em pânico, pensa irracionalmente e toma más decisões. Zero frio
Finalmente consegui uma presença mental para pensar claramente sobre o que aconteceu: é muito incomum que as classificações de palavras-chave desapareçam completamente. Deve ser técnico.
Você deve estar indexando.
Uma rápida pesquisa no Google de páginas que perderam a classificação de palavras-chave confirmou que as páginas haviam desaparecido. O Search Console relatou o mesmo:
Observe o aviso na parte inferior:
Não: "noindex" detectado na metatag "robots"
Agora estávamos chegando a algum lugar. Então, chegou a hora de confirmar essa descoberta no código-fonte.
Nossas páginas foram marcadas para desindexação. Mas quantas páginas foram des-indexadas até agora?
Etapa 4: inspecionar o dano
Todos eles. Depois de enviar algumas notas frenéticas ao nosso desenvolvedor, ele confirmou que um sprint implantado na noite de quinta-feira (1 de agosto de 2019), quase três dias antes, acidentalmente colocou o código ativo em cada página.
Mas o site inteiro foi desindexado?
É muito improvável, porque, para isso, o Google precisaria rastrear cada página do site dentro de três dias para encontrar a marcação "noindex". O Search Console não ajudaria nesse sentido, pois seus dados sempre serão atrasados e você nunca poderá detectar alterações antes de serem corrigidas.
Mesmo olhando para trás agora, vemos que o Search Console coletou apenas um máximo de 249 páginas afetadas, de mais de 8.000 indexadas. O que é impossível, uma vez que nossa presença na pesquisa foi reduzida em um terço uma semana inteira após a resolução do incidente.
Nota: Nunca terei certeza de quantas páginas foram completamente desd indexadas no Google, mas o que sei é que TODAS as páginas tinham um marcador noindex e lembro-me vagamente do site do Google: brafton.com e vi cerca de um oitavo de Nossas páginas indexadas. Certamente eu gostaria de ter uma captura de tela. Sinto muito.
Etapa 1: resolver o problema
Depois que o problema foi identificado, nosso desenvolvedor retirou a atualização e colocou o site em operação como antes da marcação "noindex". Depois veio a questão de reindexar nosso conteúdo.
Etapa 2: faça o site rastrear novamente o mais rápido possível
Removai o mapa do site anterior, criei um novo e recarreguei no Search Console. Também peguei a maioria das páginas de destino dos nossos principais produtos e solicitei manualmente a indexação novamente (o que acho que não fará nada desde a atualização SC mais recente).
Etapa 3: aguardar
Não havia mais nada que pudéssemos fazer a não ser esperar. Havia tantas perguntas:
- As páginas serão classificadas para as mesmas palavras-chave de antes?
- Eles serão classificados nas mesmas posições?
- O Google "penalizará" as páginas de alguma forma por desaparecerem brevemente?
Só o tempo diria.
8 de agosto de 2019 (uma semana): queda de 33% na presença de pesquisa
Ao avaliar o dano, usarei a data em que o código de erro foi totalmente implementado e concluído nas páginas ativas (2 de agosto) como uma zona zero. Em seguida, a primeira medição será concluída em sete dias, de 2 a 8 de agosto.
O Search Console provavelmente me daria a melhor indicação de quanto nossa presença na pesquisa sofreu.
Perdemos cerca de 33,2% do nosso tráfego de pesquisa. Ai
Felizmente, isso marcaria o nível máximo de dano que experimentamos ao longo do teste.
15 de agosto de 2019 (duas semanas): queda de tráfego de 23%
Durante esse período, eu estava monitorando duas coisas: tráfego de pesquisa e páginas indexadas. Apesar de reenviar meu sitemap e pesquisar páginas manualmente no Search Console, muitas páginas ainda não foram indexadas, mesmo as principais páginas de destino. Isso se tornará um tópico ao longo desta linha do tempo.
Como resultado de nossas páginas não indexadas restantes, nosso tráfego ainda sofreu.
Duas semanas após o incidente, ainda estávamos 8% menos e nossas conversões geradoras de receita caíram com o tráfego (apesar do aumento nas taxas de conversão).
22 de agosto de 2019 (três semanas): queda de 13% no tráfego
Nossas páginas ainda eram indexadas lentamente. Dolorosamente lento, enquanto observava meus objetivos comerciais caírem no chão.
Pelo menos ficou claro que nossa presença na pesquisa estava se recuperando. Mas como Ele estava se recuperando era de particular interesse para mim.
Todas as páginas foram indexadas novamente, mas com uma presença de pesquisa menor?
Apenas parte das páginas foi reindexada com a presença da pesquisa completamente restaurada?
Para responder a essa pergunta, examinei as páginas que foram des-indexadas e reindexadas individualmente. Aqui está um exemplo de uma dessas páginas:
Aqui está um exemplo de uma página que foi des indexada por um período muito mais curto:
Nos dois casos que pude encontrar, cada página foi completamente restaurada à sua presença de pesquisa original. Portanto, não parecia ser uma questão de recuperar ou não páginas, era sobre quando as páginas seriam indexadas novamente.
Por falar nisso, o Search Console tem um novo recurso no qual "validará" as páginas de erro. Iniciei esse processo em 26 de agosto. Após esse ponto, o SC rastejou lentamente novamente (eu acho) essas páginas com uma melodia de cerca de 10 páginas por semana. Isso é ainda mais rápido que uma verificação agendada normalmente? Essas ferramentas no SC fazem alguma coisa?
O que eu tinha certeza era que ainda havia várias páginas fora do índice após três semanas, incluindo as páginas de destino comerciais que eu costumava gerar tráfego. Mais sobre isso mais tarde.
29 de agosto de 2019 (quatro semanas): queda de 9% no tráfego
Nesse momento, fiquei muito frustrado, porque havia apenas cerca de 150 páginas para reindexar e, não importa quantas vezes eu inspecione e solicite uma nova indexação no Search Console, ela não funcionará.
Essas páginas poderiam ser totalmente indexadas (conforme relatado pela inspeção do URL do SC), mas não seriam rastreadas. Como resultado, ainda estávamos 9% abaixo da linha de base, depois de quase um mês.
Uma página específica simplesmente se recusou a ser indexada novamente. Esta era uma página de produto de alto valor comercial que eu tinha para conversões.
Nas minhas tentativas de forçar a reindexação, tentei:
- Solicitação de inspeção e indexação de URL (15 vezes durante o mês).
- Atualizando a data da publicação e solicitando a indexação.
- Atualize o conteúdo e a data de publicação e solicite a indexação.
- Encaminhando sitemaps para o SC.
Nada funcionou Esta página não será indexada novamente. A mesma história para mais de cem URLs menos comercialmente menos impressionantes.
Nota: Esta página não será indexada novamente até 1º de outubro, dois meses completos após a indexação.
A propósito, é assim que nosso progresso geral de recuperação era após quatro semanas:
5 de setembro de 2019 (cinco semanas): queda de 10,4% no tráfego
O grande planalto Nesse ponto, reindexamos todas as nossas páginas, exceto as ~ 150 mais ou menos supostamente "validadas".
Eles não eram. E eles também não estavam sendo rastreados.
Parecia que provavelmente nos recuperaríamos completamente, mas o momento estava nas mãos do Google e não havia nada que eu pudesse fazer para impactá-lo.
12 de setembro de 2019 (seis semanas): aumento de 5,3% no tráfego
Demorou cerca de seis semanas até recuperarmos completamente nosso tráfego.
Mas, na verdade, ainda não havíamos recuperado completamente nosso tráfego, pois alguns conteúdos tiveram um desempenho superior e compensaram excessivamente várias páginas que ainda não estavam indexadas. Em particular, nossa página de produtos que não será indexada por mais de 2,5 semanas.
Em geral, nossa presença na pesquisa se recuperou após seis semanas. Mas nosso conteúdo não foi totalmente indexado novamente até mais de oito semanas após a solução do problema.
Conclusão
Para começar, definitivamente não exclua o índice do seu site por acidente, por um experimento ou por qualquer outro motivo. Pica Estimo que limpamos cerca de 12% de todo o tráfego orgânico, o que equivale a uma queda igualmente proporcional nas conversões comerciais.
O que aprendemos?
Depois que as páginas foram reindexadas, elas foram completamente restauradas em termos de visibilidade da pesquisa. O maior problema foi reindexá-los.
Algumas perguntas principais que respondemos com este experimento acidental:
Nós recuperamos?
Sim, recuperamos totalmente e todos os URLs parecem gerar a mesma visibilidade de pesquisa.
Quanto tempo levou?
A visibilidade da pesquisa retornou à linha de base após seis semanas. Todas as páginas são reindexadas após aproximadamente oito a nove semanas.
