# Agents amb restricció total User-Agent: Morfeus Fucking Scanner User-Agent: Morfeus User-Agent: Morfeus* User-Agent: libwww-perl Disallow: / # Directoris que no poden accedir els bots # Definim 30 segons entre peticions mateix bot User-Agent: * Disallow: /mh/ Disallow: /*.gif$ Disallow: /*.jpg$ Disallow: /*.pdf$ Disallow: /*.avi$ Disallow: /*.png$ Crawl-delay: 30