User-agent: *
Disallow: /cgi-bin/ ejemplos de  bloqueados.
Disallow: /images/
Disallow: /tmp/
Disallow: /private/
Disallow: /directory/file.html

Sitemap: http://www.tse.go.cr/sitemap.xml ???? verificar