User-agent: *     # aplicable a todos
Disallow: /     #  Con Disallow: / se excluirían todas las paginas