[Date Prev][Date Next] [Thread Prev][Thread Next] [Date Index] [Thread Index]

Re: [meio off] robots no logs do apache



Olá Marcelo !!!

http://www.google.com/webmasters/bot.html#howoften

2. Como posso solicitar ao Google para não indexar determinadas partes do meu site?

O robots.txt é um documento padrão que informa ao Googlebot que ele não deve fazer o download de determinadas informações do seu servidor web. O formato do arquivo robots.txt é especificado na Norma de Exclusão para Robôs. Para obter instruções detalhadas sobre como evitar que o Googlebot indexe a totalidade ou parte do seu site, consulte a nossa página de Remoções. Lembre-se de que as alterações no arquivo robots.txt do seu servidor não serão refletidas imediatamente no Google. Elas serão descobertas e propagadas quando o Googlebot fizer a próxima indexação do seu site.

Respondendo sua pergunta, É BOM !!!!

[]'s
Ivan

Marcelo H. escreveu:
ola pessoas.....

montei um server web tempos atras e to acompanhando os logs do apache de todos os dominios o seguinte:

66.249.66.139 - - [25/Nov/2005:05:36:02 -0200] "GET /robots.txt HTTP/1.1" 404 298 "-" "Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)" "-"


alguem saberia dizer do q se trata essa parada ae? eh coisa boa ou ruim? eheheheheh....

valeu pessoal....


Yahoo! Acesso Grátis: Internet rápida e grátis.
Instale o discador agora!


Reply to: