Artigos ‘robots.txt’
Robots.txt mobile: bloqueando acesso de URLs no celular
Sunday, May 17, 2009 19:49 0 comentáriosAos familiarizados com o famoso robots.txt, é simples utilizar este arquivo que lista os User-Agents e seus respectivos bloqueios. Aqui, tratarei do Google especificamente. É possível fazer-se o bloqueio de determinados URL’s para que o Google-Mobile não indexe tais páginas de seu mobile site. Isso pode ser bastante útil caso você não queira indexar páginas [...]
Universo Wap