El curioso “robots.txt” de la SGAE

Bien es cierto que la SGAE siempre ha tenido fama de ser unos ladr…. y unos mafi…., no obstante, mirando su propio fichero robots.txt, que este sirve para evitar ser indexado con ciertas urls/palabras por los buscadores como por ejemplo Google, ellos mismos parecen delatarse, especialmente en estos días.

http://www.sgae.es/robots.txt


User-agent: *

Disallow:/portal/

Disallow:/portal/
Disallow:/wp-*

Disallow:/?SGAE=LADRONES=MONOPOLIO
Disallow:/?ladrones
Disallow:/?mafiosos

Disallow:/?
Disallow:/?*
Disallow:/author/
Disallow:/category/
Disallow:/portal/
Disallow:/search/
.......

Supongo que los sitios webs honrados, no necesitan de este tipo de soluciones :)

2 Replies to “El curioso “robots.txt” de la SGAE”

Deja un comentario

Tu dirección de correo electrónico no será publicada.