Como otimizar o robots.txt para o WordPress e Google
Recentemente tive problemas com conteúdo duplicado no Google, em um dos meus Blogs que uso WordPress. Pesquisei um pouco e vi que uma das soluções passava por criar um robots.txt que bloqueasse algumas urls onde o WordPress duplica conteúdo, basicamente tags, categorias e arquivo.
No BRPoint tem um robots bem interessante mas eu precisei fazer algumas mudanças. O código completo está abaixo.
User-agent: * # remova os diretorios Disallow: /cgi-bin/ Disallow: /tag/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /trackback/ Disallow: /feed/ Disallow: /category/ Disallow: /2007/ Disallow: /2008/ Disallow: /loja/ User-agent: Googlebot # remover scrips css e afins Disallow: /*.php$ Disallow: /*.js$ Disallow: /*.inc$ Disallow: /*.css$ Disallow: /*.wmv$ Disallow: /*.cgi$ Disallow: /*.xhtml$ Disallow: /cgi-bin/ Disallow: /tag/ Disallow: /wp-admin/ Disallow: /wp-includes/ Disallow: /trackback/ Disallow: /feed/ Disallow: /category/ Disallow: /2007/ Disallow: /2008/ # permitir o adsense em qualquer url User-agent: Mediapartners-Google* Disallow: Allow: /* # BEGIN XML-SITEMAP-PLUGIN Sitemap: http://www.mundohitech.com/sitemap.xml.gz # END XML-SITEMAP-PLUGIN
Além do ajuste no robots.txt fiz mais uma modificações que encontrei neste site.
Nenhum post relacionado.