Resultados de uma estratégia de recuperação de não indexação acidental

“Eu sei antes mesmo de as cartas serem viradas…” – Mike McDermott, Cartasna Mesa

Quando Mike McD foi chamado por Teddy KGB em um imenso jogo de poker TexasHold’em, ele não teve nem que ver a mão de seus oponentes parasaber que o KGB tinha dois ases, a única mão que poderia bater seusnoves cheios de ases (se você tiver visto o filme Cartas na Mesa,sinta-se à vontade para pular o vídeo abaixo, se não, seria bomvocê assistir). Este foi o mesmo sentimento que eu tive quandotivemos “SERP a DERPd” através de uma não indexaçãoacidental de 9 mil de nossas páginas mais importantes…

Conteúdos:

1. O que acontece quando as páginas são acidentalmente não indexadas
2. Táticas para inserir as páginas no Google index rapidamente
3. Como o noindex impacta os rankings SERP

(noteque estou focando no Google neste artigo)

Background

Sou especialista em SEO e marketing na SeatGeek.com, uma startup de NYC. Nosso site é um mecanismo de busca de ingressos para shows, esportes e teatros.

No dia 1º de agosto, eu estava procurando no Google por ‘mets tickets‘ e vi que o SeatGeek tinha escorregado da primeira página. Pior ainda,nós não estávamos nem na segunda página. Eu tentei mais algumaspesquisas que eu sabia que deveriam estar na página 1 e nada. Meucoração estava batendo forte. Fomos pegos pelo Panda? Não faziasentido, mas eu estava em pânico.

Então eu entendi. Eu abri nossa página do New York Mets, mas como Mike Mcd, eu já sabia antes de clicar no view source… content=”noindex” emtodas as páginas de produtos.

Eu tenho trabalhado com SEO por apenas uns dois anos, então eu nunca tive uma experiência direta com uma situação de não indexação. Então, mesmo tendo lido relatórios que mostram que eles não têm um impacto em rankings, e sabendo que isso não era tão ruim como o problema acidental de canonização, eu não conseguia deixar de visualizar o pior… 9mil das nossas páginas de conversão mais importantes estariam forade indexação por semanas e não teriam o mesmo rank quandovoltassem ao ar.

Oque acontece quando as páginas são acidentalmente não indexadas?

Este é um gráfico de tráfego orgânico para uma das nossas páginas-chave quando o noindex bateu.

Obviamente o tráfego orgânico parou de existir. O interessante é que o Google Analytics ainda reportou algum tráfego para essas páginas.

Isso poderia ser a única vez onde ter menos frequência de crawl poderiater sido benéfico (presumindo que banda não é um problema). As páginas que não foram indexadas passam pelo crawl novamente a cada 4-6 dias, o que teria nos dado um buffer se tivéssemos pegado isso mais cedo. Infelizmente, o Google esperou até o sábado para fazer o crawl dessas páginas, e nós não vimos o problema até a segunda.

Planoe táticas de reindexação

A primeira ação era remover as tags de não indexação, o que um dos nossos engenheiros pop star fez em 5 minutos. Isso foi exatamente na hora em que mandei meu primeiro e-mail com nosso primeiro plano de ação, que incluí abaixo caso você algum dia tenha que escrever o mesmo email:

Pessoal,
Então, eu estava fazendo uma varredura diária nas posições SERP e comecei a notar que nossas páginas tinham caído de posição. Primeiroachei que o Panda tinha nos pegado, mas parece que as tags de não-indexação que devem ser aplicadas a páginas de busca e filtros denavegação recentemente foram colocadas em produção, mas comoessas páginas são re-indexadas somente a cada 3-6 dias, houve umcerto atraso no impacto de tráfego, o que vocês podem ver sefiltrarem as páginas por times/bandas.

Atualmente nós:
– Estamos com a não-indexação já removida em produção
– Escrevemos
posts
de blogs que linkam para os maiores times de esportes para
reindexar estes sites (mais difícil para as bandas)
– Vamos
lançar campanhas de mídias sociais para suportar esta causa
– Vamos
forçar uma atualização no .xml do sitemap (em uma tentativa de
ajudar com o problema de shows)
– Estamos
investigando técnicas adicionais
– Iremos
procurar pelo impacto do tráfego atual/quais páginas foram mais
impactadas (torcemos para que algumas páginas de artistas não
tenham passado pelo crawl novamente antes do conserto)

http://www.webmasterworld.com/webmaster/3601620.htm. Aqui é minha esperança de que isso seja verdade. Minha
experiência é que a “não indexação” é inofensiva no
que diz respeito ao ranking. Assim que você muda para “index”,
as páginas devem surgir nas mesmas posições nos SERPs em que elas
estavam. Vou manter vocês atualizados. – Chad

Mesmo se os ranking voltassem, queríamos que isso acontecesse o mais rápidamente possível. Eu tinha um plano, e felizmente alguns ótimos estagiários para me ajudar. Então isso é o que fizemos (me desculpe a repetição do email)…

• Removemos as tags de não indexação
• Executamos campanhas e oferecemos presentes nas redes sociais, gerando compartilhamentos estratégicos
• Internamente, criamos um Google Doc com nossas páginas de produtos mais importantes como linhas, e o nome de todo mundo como colunas, e fizemos as pessoas twitarem e clicar no +1 de várias páginas da lista, marcando-as à medida que íamos fazendo isso (leia mais com
  Rand sobre o
  poder dos compartilhamentos sociais para SEO)
• Escrevemos/publicamos conteúdo para o blog que linkava para todas as páginas que tinham sido removidas do index
• Exemplos das ações acima: NFL 2011-12 Season: Average Ticket Prices, Weekly
  MLB Price Rankings,
  A
  Sneak Peek at NBA Ticket Prices,
  First
  Look at NHL Prices
  e 3473
  Artists Ranked By SeatGeek’s Popularity Score
  (sim, eu sei que o Google não vai além de uns 100 links por
  página…)
• Usamos nossos relacionamento com o NY Daily News e o Business Insider para conseguir algum conteúdo linkando de volta para algumas páginas importantes
• Reenviamos o arquivo XML do sitemap através do Google Webmaster Tools
• Enviamos as páginas selecionadas manualmente através do recurso ‘Submit to index’ do Google Webmaster tools

Tudo o que foi feito acima foi completado em uma hora depois que descobrimos o problema, exceto pelos posts de visitantes e concursos, que foram feitos nos próximos 1-2 dias. E então nós esperamos..

Métricas da reindexação

Levou de 1 a 2 dias para nossas páginas mais importantes voltarem para oindex, o que nos deixou bem felizes. Algumas das nossas páginas mais profundas/menos importantes levaram até 5 dias para voltar, ou até mais em alguns casos. Felizmente seguimos alguns sábios conselhos e introduzimos mútilplossitemaps XML maiscedo no ano, e com todas nossas páginas de produto em um sitemap XMLfomos capazes de rastrear facilmente a indexação dessas páginascom oGoogle Webmaster Tools. A indexação e o tráfego estavam de voltano dia seguinte, mas como você pode ver no gráfico abaixo, otráfegonão voltou ao seu nível anterior até 2-3 dias depois que as tagsde não indexação foram removidas.

Impacto da não indexação nos rankings

Agora vamos dar uma olhada como isso impactou nossos rankings SERP. O exemplo acima foi um caso realmente interessante porque nossa páginados Mets tinha retornado o index na noite do conserto, e eu enviei um e-mail para meus chefes para observarem isso como um bom exemplo de recuperação de página, mas quando chegamos ao trabalho na manhã seguinte, ela tinha deixado o index novamente, e eu fiquei parecendo um palhaço. Felizmente, a página voltou (de novo…) para o indexno outro dia, e estava de volta no seu ranking antigo no final dasemana.

Esse é um exemplo de uma tendência que notei, que muitas páginas voltariam para o index primeiro, e então voltariam para seu ranking em seus termos de target um dia ou dois depois. 

O exemplo abaixo é quando retornamos o index, mas sem o mesmo ranking que tínhamos antes. Não existe de fato uma maneira de dizer se isso foi impactado pela situação da não indexação, eu suspeito que foi uma dança randômica do Google relacionada às mexidas mais frequentes que tenho visto a pesquisas relacionadas a “ingressos”.

No geral, as posições SERPS da nossa página 1 voltaram completamente a seus níveis antigos.

Conclusões

• Se você acidentalmente não indexar páginas no seu site, é claro que elas não terão mais tráfego orgânico, mas isso dependerá da taxa de crawl das páginas (no nosso caso, levaram uns 5 dias para elas saírem do index) e de 2-3 dias para elas voltarem para seus níveis normais.
• Se você tiver um blog que recebe o crawl rapidamente, use-o como uma ferramenta que ajuda a levar os spiders de volta para as páginas que foram não indexadas com links internos estratégicos (claro, espere até que você tenha removido a tag de não indexação).
• Tire vantagem de amigos e familiares para ajudar com compartilhamentos sociais e alimente isso com brindes sociais
• Use o Google Webmaster tools: 1) XML sitemap resubmit 2. Manual ‘Submit to Index’ 3. Sitemap indexation tracking
• Você deve ter Múltiplos sitemaps XML configurados em buckets lógicos para rastreamento da indexação, de forma que facilite o rastreamento da indexação mencionado acima
• Apesar de seus rankings poderem vir a experimentar uma certa “dança” a curto razão, uma não indexação acidental não terá um impacto negativo neles
• Por último, não fique tão preocupado, apenas siga algumas das táticas acima e você deve estar de volta no index com os mesmos rankings (peça pro seu chefe me mandar um e-mail se eles estiverem te enchendo o saco – chad@seatgeek.com)

Ok, então isso provavelmente foi muita informação para uma situação acidental de não indexação, mas quando aconteceu comigo foi tão assustador e não existia uma documentação sólida sobre o queesperar, então eu quis produzir isso para a próxima pessoa na minha
situação. Obrigado por ler.
Conecte-se
comigo no Twitter
se você estiver preocupado.

***

Este artigo é uma republicação feita com permissão. SEOMoz não tem qualquer afiliação com este site. O original está em http://www.seomoz.org/blog/accidental-noindexation-recovery-strategy-amp-results