Acredito que todo mundo um dia já se perguntou como que o #Google vasculha e seleciona na lista de pesquisa todos os sites e os seus conteúdos de forma organizada, mesmo que diariamente várias e várias web pages sejam criadas, deletadas ou alteradas. Isso funciona graças ao Googlebot, que informalmente vem a ser o "robozinho do google", que passa o dia vasculhando os links da web.
O Googlebot funciona a partir de 3 fases:
- RASTREAMENTO: O Googlebot parte de algum ponto da internet (largada do Googlebot), sai navegando e registrando cada vez que um site é encontrado. Caso o site registrado anteriormente já tenha sido registrado - registro duplicado -, o Googlebot dá uma atualizada de conteúdo no link que foi registrado primeiramente.
- INDEXAÇÃO: Nesta fase o Googlebot já identificou alguns sites, recolheu/atualizou informações a respeito de outros.. ok! Agora é hora de processar essas informações... até porque ele (o Googlebot) basicamente só recolheu todo esse conteúdo.
Agora os sites lidos serão avaliados baseando-se numa série de critérios que analisam o nível de SEO e o Googlebot decide quais desses sites são relevantes ou não para cada palavra-chave.O Googlebot também realiza testes de black hat nos sites. Caso o Googlebot encontre alguma irregularidade no site testado, o Googlebot não marca este site como um dos melhores para o ranking de pesquisa, e sim o marca como um site "ladrão", fazendo com o que este site seja punido. Punições estas que podem ser desde a perda de pontos que fazem o tal site ir caindo no ranking, até a desindexação deste site, onde o mesmo é expulso do Google e, consequentemente, não aparece mais nos resultados de pesquisas. - PUBLICAÇÃO: Finalmente acontece a exibição dos resultados quando o usuário faz algum tipo de pesquisa. A cada vez que o usuário coloca alguma palavra-chave na caixa de pesquisa e clica em "Pesquisa Google", é exibido ao pesquisador o índice dos melhores sites montados na fase 2.
