# Ejemplo archivo robots.txt 

User-agent:* 

Disallow: /css/
Disallow: /images/
Disallow: /inc/
Disallow: /documents/