Comentários sobre: Robots.txt e a configuração do seu Site http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/ Conheça nossos serviços de Web Marketing e Otimização de sites. Apareça na primeira página dos buscadores. Mundo SEO, seu site no topo do mundo ! Fri, 16 Jul 2010 18:02:16 -0400 http://wordpress.org/?v=2.8.4 hourly 1 Por: Junior-MaGgoT- http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-4859 Junior-MaGgoT- Wed, 24 Mar 2010 11:27:52 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-4859 Eu posso pegar o robots.txt de um outro site bem indexado e apenas fazer algumas pequenas mudanças pro meu? porq muitas paginas estão sendo restringias pelo googlebot e eu nao sei mais oque fazer... mim ajuda.. se alguem tiver uma dica de como eu tenho que fazermeu robots eu agradeço muito... Eu posso pegar o robots.txt de um outro site bem indexado e apenas fazer algumas pequenas mudanças pro meu?
porq muitas paginas estão sendo restringias pelo googlebot e eu nao sei mais oque fazer…
mim ajuda..

se alguem tiver uma dica de como eu tenho que fazermeu robots eu agradeço muito…

]]> Por: Junior-MaGgoT- http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-4858 Junior-MaGgoT- Wed, 24 Mar 2010 11:26:39 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-4858 Eu posso pegar o robots.txt de um outro site bem indexado e apenas fazer algumas pequenas mudanças pro meu? porq muitas paginas estão sendo restringias pelo googlebot e eu nao sei mais oque fazer... mim ajuda.. meu s Eu posso pegar o robots.txt de um outro site bem indexado e apenas fazer algumas pequenas mudanças pro meu?
porq muitas paginas estão sendo restringias pelo googlebot e eu nao sei mais oque fazer…
mim ajuda..
meu s

]]> Por: Marcos Oliveira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-3446 Marcos Oliveira Sat, 16 Jan 2010 16:42:17 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-3446 Boa tarde tudo bom? Inicialmente quero parabenizar pelo site e obrigado pelas dicas! Gostaria se pudesse me ajudasse não consigo enviar meu sitemap no google webmaster, o erro é a url está restrita por robots. Grato! Boa tarde tudo bom?

Inicialmente quero parabenizar pelo site e obrigado pelas dicas!
Gostaria se pudesse me ajudasse não consigo enviar meu sitemap no google webmaster, o erro é a url está restrita por robots.

Grato!

]]> Por: Livraria Digital http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-2598 Livraria Digital Sun, 22 Nov 2009 04:07:22 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-2598 Amigo então eu nao preciso ficar preocupado com URL restrito por robots.txt? Porque esto com um problemão com isso tambem.. HTTP 0 Inacessível 0 Nos Sitemaps 0 Não encontrado 17 Não seguidos 0 Restringido por robots.txt 41 Tempo limite 0 Araços. Amigo então eu nao preciso ficar preocupado com URL restrito por robots.txt?
Porque esto com um problemão com isso tambem..
HTTP 0
Inacessível 0
Nos Sitemaps 0
Não encontrado 17
Não seguidos 0
Restringido por robots.txt 41
Tempo limite 0

Araços.

]]> Por: Adriano Nogueira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-2521 Adriano Nogueira Fri, 13 Nov 2009 02:34:10 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-2521 Uma dúvida, como faço para usuários mal intencionados não localizem/open o arquivo ROBOTS.TXT ? fiz um teste no google e ele mostra todos.. robots filetype:txt Uma dúvida, como faço para usuários mal intencionados não localizem/open o arquivo ROBOTS.TXT ?
fiz um teste no google e ele mostra todos..

robots filetype:txt

]]> Por: Pedro Henrique http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-1366 Pedro Henrique Wed, 19 Aug 2009 19:51:36 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-1366 Muito bom o post, muito bem exlpicado gostei muito, porem tem uma informação que eu gostaria muito de falar que é o caso de segurança, onde o Robot.txt é uma vazão de informação onde um atacante pode muito bem conseguir através da url do txt descobrir o caminho para a página default da administração do próprio site.... quando você bota no txt "Disallow: /admin/" é uma informação que o atacante vai ficar muito feliz em saber :P Grande Abraço muito booom seu blog ! Muito bom o post, muito bem exlpicado gostei muito, porem tem uma informação que eu gostaria muito de falar que é o caso de segurança, onde o Robot.txt é uma vazão de informação onde um atacante pode muito bem conseguir através da url do txt descobrir o caminho para a página default da administração do próprio site….

quando você bota no txt “Disallow: /admin/” é uma informação que o atacante vai ficar muito feliz em saber :P

Grande Abraço muito booom seu blog !

]]> Por: Elisangela Pereira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-1172 Elisangela Pereira Thu, 21 May 2009 17:11:15 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-1172 Olá Edson! Existem 2 maneiras! Primeiramente você pode esperar que que haja nova indexação e com o passar do tempo estes links sejam retirados normalmente. Ou é possível fazer redirecionamento permanente [301] de tais links para os locais desejados. Desta maneira, ao indexar será ratificado que ambas as URL's são para mesmo destino. ;P Olá Edson!
Existem 2 maneiras! Primeiramente você pode esperar que que haja nova indexação e com o passar do tempo estes links sejam retirados normalmente.
Ou é possível fazer redirecionamento permanente [301] de tais links para os locais desejados. Desta maneira, ao indexar será ratificado que ambas as URL’s são para mesmo destino. ;P

]]> Por: Elisangela Pereira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-1171 Elisangela Pereira Thu, 21 May 2009 17:05:59 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-1171 Oi Benito! Não é um erro! É um aviso apenas, para que verifique que estas URL deveriam mesmo estar restritas. Os blogs utilizam estrutura com acesso a banco de dados, com links e tags canônicas. Desta forma limitam certas url para evitar conteúdo duplicado! Oi Benito!
Não é um erro! É um aviso apenas, para que verifique que estas URL deveriam mesmo estar restritas. Os blogs utilizam estrutura com acesso a banco de dados, com links e tags canônicas. Desta forma limitam certas url para evitar conteúdo duplicado!

]]> Por: Elisangela Pereira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-1170 Elisangela Pereira Thu, 21 May 2009 16:58:58 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-1170 Olá Arte! Visitei seu blog e achei muito interessante também! Parabéns! Obrigado pelo carinho, espero que o post tenha sido claro na especificação das URL's restritas pelo robots.txt. Estas que nem sempre são problemáticas, mas que pelo contrário, servem para proteger seu site contra conteúdo duplicado, que seria uma técnica black hat SEO cabível de punição! Beijos! Olá Arte!
Visitei seu blog e achei muito interessante também! Parabéns!
Obrigado pelo carinho, espero que o post tenha sido claro na especificação das URL’s restritas pelo robots.txt. Estas que nem sempre são problemáticas, mas que pelo contrário, servem para proteger seu site contra conteúdo duplicado, que seria uma técnica black hat SEO cabível de punição!
Beijos!

]]> Por: Elisangela Pereira http://www.mundoseo.com.br/seo-tecnico/robotstxt-configuracao-seu-site/comment-page-1/#comment-1169 Elisangela Pereira Thu, 21 May 2009 16:51:15 +0000 http://www.mundoseo.com.br/blog/?p=235#comment-1169 Olá Eli! Ter URL's restritas pelo robots.txt não é sinal de problema em seu site. É necessário verificar, pois muitas URL podem gerar conteúdo duplicado, desta maneira, devem estar mesmo restritas! Beijos! Olá Eli!
Ter URL’s restritas pelo robots.txt não é sinal de problema em seu site. É necessário verificar, pois muitas URL podem gerar conteúdo duplicado, desta maneira, devem estar mesmo restritas!
Beijos!

]]>