otimização de sites ROBOTS

thais.giacomini · 20 de janeiro de 2011

Estou tentando fazer com que um site seja indexado pelo google.

Mas quando uso a ferramente do Search Engine Robot Simulation

Ele aparece assim com todas as paginas do site:

Restricted with robots.txt

1 >> http://eurocabos.com.br/index.html

2 >> http://eurocabos.com.br/telas/empresa.html

3 >> http://eurocabos.com.br/telas/categoria_lista.php

4 >> http://eurocabos.com.br/telas/catalogo_lista.php

5 >> http://eurocabos.com.br/telas/utilidades.html

6 >> http://eurocabos.com.br/telas/noticias.html

7 >> http://eurocabos.com.br/telas/representantes.html

O que isso quer dizer?

Obrigada.

andersondanilo · 25 de janeiro de 2011

no caso deste site, ele parece estar bloqueando essas paginas

http://eurocabos.com.br/robots.txt

# robots.txt gerado em 
# marketingdebusca.com.br/robots-txt/
User-agent: Googlebot
Disallow: 
User-agent: Slurp
Disallow: 
User-agent: MSNBot
Disallow: 
User-agent: Googlebot-Image
Disallow: 
User-agent: yahoo-mmcrawler
Disallow: 
User-agent: *
Disallow: 
Disallow: /index.html
Disallow: /downloads
Disallow: /telas
Disallow: /images