Microsoft lança novo robô de buscas, o BingBot

Anunciado há algum tempo pela Microsoft, o BingBot – tipo de robô usado por mecanismos de busca como o Bing, o Google e o Yahoo para varrer a internet e indexar o conteúdo de sites – entra para valer a partir do dia 1º de outubro e aposenta o MSNBot.

Para os administradores de sites que queiram manter suas páginas visíveis aos mecanismos de busca, existem algumas poucas, mas essenciais, regras a serem seguidas na configuração do arquivo Robots.txt e de outros lugares em que se configura o acesso do robô. Existem ocasiões em que não se deseja aparecer em mecanismos de busca, como é o caso de sites de intranet e de determinados diretórios dentro da estrutura de uma URL.

Importante

Segundo o integrante do Bing Webmaster Center (central de apoio ao webmaster para o Bing), Rick DeJarnette, o robô deverá funcionar de maneira semelhante ao seu antecessor, o MSNBot. DeJarnette informa que “é crítico que você reveja as configurações de acesso de robôs ao seu site para ser visível”. De acordo com ele, as configurações de acesso no código-fonte (meta Robots e no cabeçalho) de páginas deverá ser revisto caso se queira impedir que o conteúdo seja indexado pelo BingBot. Se não houver qualquer restrição, uma opção é não ter arquivo robots.txt. Assim, o site é indexado de maneira integral.

“Contudo”

…informa DeJarnette, “o novo robô vai respeitar as diretrizes impostas ao MSNBot; caso existam regras para ambos os robôs da Microsoft no Robots.txt, o BingBot deverá priorizar as regras próprias.

DeJarnette deixa claro que webmasters que estavam otimizando as páginas com vistas ao posicionamento no sistema de buscas do Yahoo, assumido pelo Bing nos EUA e no Canadá há menos de um mês, devem adaptar-se às mudanças se quiserem continuar a ranquear de maneira satisfatória no sistema de buscas Bing.

BingBot no Brasil?

O Bing ainda é uma versão beta no Brasil, diferente de países como os EUA, por exemplo. Ainda não é sabido se o BingBot vai ou não varrer as páginas brasileiras. Estamos no aguardo de procunciamento da Microsoft sobre essa questão.

Por Klaus Junginger, da Computerworld