User-agent: * # todos os robôs poderão visitar o site

# pastas que não podem ser indexadas
Disallow: /html/
Disallow: /js/
Disallow: /include/
Disallow: /imagens/
Disallow: /siteantigo/