robots.txt (Bush) vs robots.txt (Obama) de la web de la casa blanca

Curioso el link que ha publicado Anieto2k sobre el archivo robots.txt de la web de la casa blanca, antes y después de la entrada de Obama.

Utilizando WayBack Machine, máquina del tiempo, podremos ver el archivo robots.txt de Marzo de 2008.

robots.txt antes de entrar Obama:

User-agent: *
Disallow: /cgi-bin
Disallow: /search
Disallow: /query.html
Disallow: /omb/search
Disallow: /omb/query.html
Disallow: /expectmore/search
Disallow: /expectmore/query.html
Disallow: /results/search
Disallow: /results/query.html
Disallow: /earmarks/search
Disallow: /earmarks/query.html
Disallow: /help
Disallow: /360pics/text
Disallow: /911/911day/text
Disallow: /911/heroes/text

2400 líneas más..

robots.txt después de entrar Obama.

User-agent: *
Disallow: /includes/

Curioso, verdad?

One Response to “robots.txt (Bush) vs robots.txt (Obama) de la web de la casa blanca”

  1. Al dice:

    Hombre, si tradujeses a lenguaje “humano” donde está la gracia, pues igual quedaba un poco menos friki…