Olá galera,encontrei esta matéria na net que fala sobre a importância do sitemap para melhorar e diminuir o tempo de indexação dos sites junto ao buscadores, a tradução é minha porém o texto original com os gráficos dos resultados do teste (disponíveis somente no site) não são de minha autoria, espero que seja de grande ajuda, grande abraço. <!-- s:ugeek: --><img src="{SMILIES_PATH}/icon_e_ugeek.gif" alt=":ugeek:" title="Uber Geek" /><!-- s:ugeek: -->
A matéria a seguir foi extraída do site:
http://www.seomoz.org/blog/do-sitemaps-effect-crawlers
, créditos a Chenry.
Sitemaps afetam buscadores?
Como qualquer outra pessoa lá fora, eu caio em hábitos, bons e maus. Recentemente, enquanto trabalhava no site de um cliente, eu criei um Sitemap e apresentei-o aos motores de busca, como sempre faço. Comecei a pensar se isto realmente ajuda o site e qual é o efeito quando eu enviar um Sitemap no site.
Aproximei-me de um dos meus clientes que tem um blog semi popular e usa WordPress e o Google XML Sitemaps Generator plugin para WordPress. Eu pedi permissão para instalar o meu script de monitoramento em seu site para rastrear o paradeiro dos bots. Para aqueles de vocês que não sabem o que é o Google XML Sitemaps Generator, cada vez que você editar ou criar um post no WordPress, cria um novo mapa do site e envia-lo para os motores de busca principais.
Meu cliente é bom na postagem de novos conteúdos para o seu blog, geralmente em torno de 2 ou 3 mensagens por semana. O script que eu instalei em seu site foi escrito em PHP e monitorado cada vez que um bot acessou o Sitemap, cada vez que o Sitemap foi enviado, e cada página é rastreada no site. O script mantém esta informação armazenada em um banco de dados MySQL, juntamente com a marcação do tempo, o endereço IP, e o agente do usuário. Eu também modifiquei o Sitemap Generator para inserir a data e a hora toda vez que o mapa do site foi apresentado aos motores de busca.
Para os dados!
O experimento foi para ver se o envio de um Sitemap para Google e Yahoo iria diminuir o tempo que o Google leva para rastrear e indexar a página. Os resultados para este blog foram surpreendentes! Quando o Sitemap foi apresentado o tempo médio necessário para o bot visitar o novo post foi de 14 minutos para o Google e 245 minutos para o Yahoo. Quando o Sitemap não foi submetido o bot demorou 1.375 minutos para o Google e 1773 para Yahoo. As médias foram calculadas em 12 lugares diferentes, com 6 Sitemaps sendo submetidos e com 6 Sitemaps não submetidos.
Depois de calcular os dados, eu pensei que tinha havido um engano. Fui para o meu site (Designs GR Web, shameless plug) e rapidamente se criou uma nova carga e enviou um Sitemap para Google e Yahoo. Verifiquei o meu script de acompanhamento 30 minutos depois e o Google já tinha estado lá e o post de novo foi indexado. O Yahoo logo em seguida depois que o Google fez também.
Depois de ver quanto tempo levou o bot para rastrear sem um Sitemap, eu percebi que havia um problema com a estrutura do site e os bots não poderiam rastrear as páginas de novo. Quando eu olhei no site e tinha outros buscadores olhando, não encontramos problemas. Eu também procurei e descobri que o bot avaliou a página onde os novos links apontam para os novos lugares, mas nunca passou a indexar a página mais tarde.
Eu estava fazendo a pesquisa para este post e encontrei um post intitulado "Minhas informações sobre o Google Sitemaps - Verificam, mas não se submetem," e eu encontrei-me perplexo.Por que me dizem para não submeter o meu Sitemap quando recebi esses grandes resultados a partir dele? Depois de reler o post, eu descobri que ele estava mais interessado em obter os dados de rastreamento valiosos. Admitindo-se que eu estou usando WordPress e sabemos que todas as minhas páginas sejam rastreáveis, por que não posso submeter o Sitemap, especialmente se eu estou indo para obter resultados, como acima?
Para sites como o da experiência, que sabe que seu site não tem problemas com a indexação natural, Sugiro enviar um Sitemap, pois ele irá levar a um rápido rastreamento e inclusão nos índices. Se você tem um site onde você não tem certeza se sua estrutura de link está correta, sugiro que você não envie um Sitemap. Isso irá ajudá-lo a determinar se você tem ou não problemas. Para todas aquelas pessoas que têm sites lá fora que possuem grande estrutura de links, não vai ajudar fazer as coisas rapidamente e enviar um Sitemap para Google e Yahoo hoje.
