# robots.txt koeln.de UB092008
# abuse will be prosecuted

# Note: This system and its content is being migrated
# there is no reason whatsoever to continue indexing
# so go away, and use www.koeln.de for indexing purposes
User-agent: *
Disallow: /
#Disallow: /cms/
#Disallow: /ausgehen/kino/kinokalender/
#Disallow: /stadtinfo/kinderkinokalender/
#Disallow: /ausgehen/tk/
#Disallow: /ausgehen/gastroguide/pages/front/
#Disallow: /gaestebuch
#Disallow: /branchenfuehrer/pages/admin-user/
#Disallow: /branchenfuehrer/partner
#Disallow: /service/mail2friend.html
#Disallow: /branchenfuehrer-mds
#Disallow: /_suchmaschine/
#Disallow: /honeypot/youhavebeenwarned/
#Disallow: /go
#Disallow: /content/
#Disallow: /service/mail/support/
#Disallow: /cgi-bin/
#Disallow: /bildergalerien
#Disallow: /mobil
#
# google mini Test
#User-agent: gsa-crawler
#Disallow: /urgh
#Allow: /_suchmaschine/
#
#User-agent: googlebot
##Disallow: /ausgehen/kino/kinokalender/
#Disallow: /stadtinfo/kinderkinokalender/
##Disallow: /ausgehen/tk/
#Disallow: /bf/
#Disallow: /content/
#Disallow: /ausgehen/gastroguide/pages/front/
#Disallow: /gaestebuch
#Disallow: /branchenfuehrer/pages/admin-user/
#Disallow: /branchenfuehrer/partner
#Disallow: /service/mail2friend.html
#Disallow: /branchenfuehrer-mds
#Disallow: /_suchmaschine/
#Disallow: /go
#Disallow: /mobil
#Disallow: /cgi-bin/ 
#Disallow: /service/mail/support/
## google-spezifisch: mit Wildcard
#Disallow: /*?
#
#User-agent: Mediapartners-Google* 
#Disallow: /branchenfuehrer-mds
#Disallow: /cms/*/uebersicht.html$
#Disallow: /go
#Disallow: /*?
#
#User-agent: mnogoKoeln
#Disallow: /branchenfuehrer/pages
#Disallow: /branchenfuehrer-mds
#Disallow: /ausgehen/gastroguide/pages
#
#User-agent: Googlebot-Mobile
#Allow: /mobil
#
#User-agent: InsumaScout/*
#Disallow: /branchenfuehrer-mds
#Disallow: /ausgehen/tk
#Disallow: /ausgehen/kino
#
#User-agent: ia_archiver
#Disallow: /branchenfuehrer
#
## What the hell are Yahoo doing?! Slow down, slurp, and stick to the specs!!!
#User-agent: Slurp
#Crawl-delay: 10