Estudio sobre robots.txt

Un estudio sobre los ficheros “robots.txt” ha sido realizado por la Universidad Pennsylvania State University denominada : “Determining Bias to Search Engines from Robots.txt” en 7.500 sitios web donde demuestran los beneficios que los webmasters obtienen utilizándolo.

estudio_robots.jpg

 

Según el estudio : 93.8% de los ficheros robots.txt tienen una regla de conducta para los robots, y 72.4% mencionan por lo menos un spider.

botseer.jpg

 

Este estudio fue realizado con el robot Botseer de los estudiantes de la Universidad Pennsylvania State University.

 

En la página de Botseer también se pueden encontrar las estadísticas sobre las palabras claves que se buscan, si los ficheros utilizan o no restricciones para los buscadores. Ejemplo de búsqueda: posicionamiento

 

Fuente:Searchengineland

 

Gracias Fleurs

 

 

 

 

 

3 respuestas a Estudio sobre robots.txt

  1. Olivier dice:

    Interesante estudio de los estudiantes de la Universidad Pennsylvania State University, gracias. A ver como funciona ese buscador de Botseer que parece útil.

  2. andres dice:

    me parece muy interesante la tematica y quisiera aportar con un link en el que se encuentran varioas proyectos de desarrollo de robotica http://www.cvr.espol.edu.ec es el centro de vision y robotica de ESPOL

Responder

Introduce tus datos o haz clic en un icono para iniciar sesión:

Logo de WordPress.com

Estás comentando usando tu cuenta de WordPress.com. Cerrar sesión / Cambiar )

Imagen de Twitter

Estás comentando usando tu cuenta de Twitter. Cerrar sesión / Cambiar )

Foto de Facebook

Estás comentando usando tu cuenta de Facebook. Cerrar sesión / Cambiar )

Google+ photo

Estás comentando usando tu cuenta de Google+. Cerrar sesión / Cambiar )

Conectando a %s

A %d blogueros les gusta esto: