Há alguns dias acordei para uma estranha surpresa. Todo o website traffic vindo para a MasterNewMedia através do Google subitamente desapareceu. De mais de 14000 visitas para 4000 ou menos representa uma tremenda descida no tráfego de um dia para o outro. O pior é quando ganha a vida com isso, pois baixar os seus rendimentos diários para um terço vai causar-lhe certamente alguns transtornos.

Estatísticas de tráfego mostrando os visitantes únicos para os primeiros dias de Agosto de 2007 para a MasterNewMedia registados pelo Hitbox Professional

Mas já tive situações semelhantes, geralmente devido ao spam nos comentários, a bugs de relatórios com o nosso serviço de análises ou com problemas com o servidor como spider de motores de busca a explorarem os recursos do meu sítio Web para actualizar os seus índices.

Mas após ter feito todas as verificações, desta vez sabia que era algo diferente.

Sabia porque o meu webmaster Drazen reparou que embora o tráfego do motor de busca Google tenha caido drasticamente de uma hora para a outra, os visitantes que chegavam através dos seus favoritos ou inserindo o nome deste sítio Web não se tinham alterado.

O próprio Google, por alguma razão desconhecida já não enviava tráfego para o meu principal sítio Web. Porquê?

Deus, disse para mim mesmo, se isto dura mais uns dias estou "in serious, deep shit".

Como faço os meus serviços de publicação on-line sobreviver se as alterações do Google são permanentes e irreversíveis?

Como 80% dos meus rendimentos vêm do Google AdSense e na sua capacidade de converter surfistas Web em potenciais clientes para uma das muitas mensagens publicitárias em texto do Google, sem tráfego vindo do motor de busca Google, teria que reavaliar a minha estratégia de rentabilização de conteúdos. Mas como?

À medida que comecei a apontar algumas ideias sobre como teria que revolucionar a minha estratégia de conteúdos para sobreviver a este impacto nuclear, um súbito pensamento sobre o que poderia causar os meus problemas de tráfego foram para o Google Dance.

Estatísticas que mostram as visualizações de páginas - a linha amarela mostra o tráfego de referência médio para a MasterNewMedia - gráfico da Hitbox Professional

Se nunca tiver ouvido falar do Google Dance, e é um editor on-line, deveria parar e saber mais sobre este importante evento periódico que também pode afectar o seu sítio Web.

Basicamente, o Google Dance é um processo que dura vários dias e que tem lugar em vários data center do Google de todo o mundo. Durante este processo, o Google indexa todos os sítios Web do mundo, os seus links e conteúdos são actualizados e refrescados completamente. Se o seu sítio Web fizer parte deste processo que acontece durante esta "dança", ele pode perder temporariamente o seu PageRank para o recuperar dias mais tarde. Perder o PageRank pode significar cair da primeira página nos resultados de pesquisa para a página dez ou pior. A Google Dance acontece geralmente a cada três meses, mas não há nenhum aviso oficial da Google sobre quando acontece de facto.

Assim, logo que todas as verificações técnicas no servidor e rede confirmaram múltiplas vezes que não existia nada fora do normal nas nossas máquinas e nos canais da Internet, pensei que, apesar de nunca ter acontecido durante os sete anos de existência da MasterNewMedia, tinha chegado a altura da Google Dance mexer com o sítio Web.

O pior é que não existe uma forma certa de saber se é vítima da Google Dance, para além de seguir alguns conselhos on-line não muito científicos que o aconselham a ver periodicamente alguns data centers do Google para verificar se os registos de indexação para o seu sítio Web variam de servidor para servidor, indicando possivelmente, se assim for, que o seu sítio Web está a participar na Google Dance.

Fora isso, parece que tudo o que pode fazer é esperar que a duração típica de uma Google Dance (entre três a cinco dias, supostamente) e fazer figas para que as coisas voltem como estavam antes do desastre do tráfego.

E assim espera entre três a cinco dias, enquanto o seu tráfego vai para números perto do zero e com ele desaparecem os seus lucros diários.

Mas, como vim a descobrir, ficar à espera pode não ser a melhor estratégia.

Esperar quando se está numa situação de emergência nem sempre é a melhor opção a tomar. E de facto, esta manhã, o quarto dia que as pesquisas no Google trouxeram quase zero visitantes para a MasterNewMedia, decidi ver noutro lugar que não tivesse visto já.

Ontem, pensando sobre o problema, fui conscientemente para os fóruns Webmaster World, um dos mais antigos e mais populares fóruns públicos que discute problemas de webmasters e, assim, problemas semelhantes ao meu. Nos WWF li várias vezes pessoas a referirem-se ao GWT como algo que nunca tinham utilizado ou verificado antes de chegarem a uma conclusão em relação à causa dos problemas com o sítio Web, mas para mim, o acrónimo não significava nada..

Como é frequente nestas situações, não lhes dou muita atenção e continuei a pesquisar por outros comentários e relatos de indivíduos que tivessem situações semelhantes à minha sem resultados relevantes. Convenci-me ainda mais que era provavelmente uma vítima da Google Dance e que a única coisa que podia fazer era ser paciente e esperar.

E assim fiz. Mas apenas durante mais algumas horas. Como a minha subsistência e a de pessoas de quem gosto aqui e noutros pontos do globo dependem que o meu negócio de publicação on-line ofereça rendimentos suficientes, não posso esperar e pensar sobre isto quando são centenas de dólares diários que desaparecem.

Assim, logo de manhã às 7 horas, a primeira coisa que pensei quando saí da minha acolhedora cama foi: Já acabou? Os meus visitantes voltaram?

Mas infelizmente nada.

O meu tráfego continuava uma linha plana sem sinais de vida. Nem vi os meus rendimentos do dia anterior pois ao ver esses números ainda me iria doer mais.

Mas... espera!

O meu "Google interno" tirou vantagens da boa noite de sono e subitamente a minha pesquisa mental que efectuei produziu um resultado: GWT = Google Webmaster Tools, algo que já tinha visto antes.

Várias ideias surgiram na minha mente quando me dirigia para a Google Webmaster Tools, um recurso aberto e grátis para todos os editores on-line que pretendem verificar se existem alguns problemas ou limitações técnicas com os seus sítios Web e a capacidade do Google o indexar.

Infelizmente, não pode ir às GWT e fazer um teste imediato ao seu sítio Web. As GWT exigem que adicione uma tag ou um ficheiro em HTML com um nome específico à sua página principal para se certificar que é o dono/webmaster do sítio Web a ser verificado. Munido de paciência e tempo eu enviei o ficheiro que o Google especificou e tive acesso imediato às estatísticas do meu sítio Web como era visto pelo crawler do Google.

Blam. O erro que causava todos os problemas estava à minha frente, à espera de ser resolvido.

Merda, merda, merda... Gritei repetidamente.

O Google identificou, dissecou, relatou e sugeriu como resolver problema. Estava simplesmente à minha espera.

Um endereço mal formado estava a fazer com que o spider do Google parasse o seu processo de crawling, fazendo com que o Google entrasse num modo de suspensão com o nosso sítio Web e basicamente retirasse o nosso conteúdo das pesquisas até que o problema fosse resolvido.

O que precisava mais? Nada. Apenas culpar-me por não ter verificado sistematicamente esta ferramenta e por ter ficado demasiado tempo a pensar que era outra vítima da Google Dance.

Conclusões

O que posso recomendar a todos que estejam a gerir um ou mais sítios Web que dependam em grande parte do tráfego do Google e lucros gerados através do AdSense é que utilizem periodicamente as Google Webmaster Tools ou então para encontrar uma forma de automatizar isto (sabe de alguma forma?) para que possa ser executado diariamente.

Perder tráfego é mau mas perder tráfego e não o saber é suicida. Google Webmaster Tools provou neste caso ser uma ferramenta de valor estratégico auxiliando-me a identificar um problema técnico crítico que estava a impedir que todo o tráfego de pesquisas do Google encontrasse o meu sítio Web.

A Google Webmaster Tool é também a funcionalidade fundamental para submeter periodicamente os seus "sitemaps" para o Google, simplificando bastante o trabalho de indexar completamente o seu conteúdo relevante na mais rápida e fiável maneira possível.

N.B.: Uma coisa curiosa que reparei é que o sitemap de exemplo que o Google fornece com um link para o validador W3C não é validado mesmo sendo preparado originalmente pelo Google. Não digo para culpar o Google mas para poupar tempo em preparar e testar o seu sitemap para o Google. O verdadeiro validador é o próprio Google. Não perca tempo a tentar que o validador W3C o aprove. Logo que o Google o aceite, você será uma pessoa feliz.

Escrito por Robin Good para a Master New Media e publicado originalmente como: "Sudden Traffic Loss? Google Doesn't Send You Anymore Visitors? Here Is What To Check"