El fichero Robots.txt para SEO
Artículos en El fichero Robots.txt para SEO
5
Errores críticos originados por el robots.txt
¿sabías que si el robots.txt no está disponible los rastreadores asumirán que pueden rastrear todas las urls de la web? ¿o que si el robots.txt está inacesible los rastreadores no volverán a rastrear ninguna URL de tu web hasta que pueda acceder al fichero robots.txt?.
¿Es necesario comenzar con slash la directiva Disallow?
Publicado el viernes 26 de febrero del 2016 por Lino Uruñuela El otro día, mi socio Natzir me pasó el tweet de John Muller donde indicaba que la directiva Disallow del robots.txt debía comenzar siempre con un slash "/". Esto ha provocado cierto revuelo entre los SEOs, muchos de nosotros no hemos tenido nunca esta prem…
Cuando restringes por robots.txt puedes aumentar el número de URLs indexadas
Publicado el 3 de diciembre del 2012, by Lino Uruñuela Llevo unos cuantos meses observando un comportamiento algo contradictorio al restringir URLs desde el robots.txt. Supuestamente en el robots.txt puedes restringir el acceso a los buscadores como Google, para así no indexar y que no se muestre en las búsquedas resu…
PR sculpting con JavaScript y Robots.txt
Publicado el 28 de febrero del 2010 Ya vimos como hacer PR sculpting usando JavaScript , así, independientemente de cómo Google quiera valorar los enlaces nofollow ( a veces nos dice que valen para pr sculpting y otras nos dice que no ) nos aseguramos que el peso de una url lo traspasemos exactamente entre los links q…
Otra forma de hacer PageRank sculpting
Publicado el 4 de junio del 2009 Se está montando un pequeño revuelo en el mundo SEO a costa de unas declaraciones de Matt Cutts en el SMX advance (no, el de Madrid no) acerca de la nueva manera en que Google trata los enlaces con nofollow. Antes Hasta ahora si tenías 10 enlaces en una página web, la fuerza que traspa…
Comentarios
Todavía no hay comentarios publicados.