# Configuración xeral
User-agent: *
Crawl-delay: 10

# Configuración para o indexador Nutch-IGE
User-agent: Nutch-IGE
Allow: /

User-agent: Scrapy
Disallow: /