User-agent: *
#Disallow: /login/        #sperrt Verzeichnis login
#Disallow: /demo/filme/   #sperrt Verzeichnis filme
#Disallow: */Login        # sperrt Verzeichniss */Login

User-agent: msnbot       # anweisungen für msnbot
Crawl-Delay: 60          # bitte erst nach 20 Sekunden weitermachen