# robots.txt for http://www.studenten-wohnung.de/
User-agent: * # Alle Suchmaschinen werden angesprochen
Disallow: /adserver/ # Sperrung eines bestimmten Bereiches
Disallow: /werbungneu/ # Sperrung eines bestimmten Bereiches
Disallow: /cgi-bin/ # Sperrung eines bestimmten Bereiches
# Disallow: /champaga/ # Sperrung eines bestimmten Bereiches
Disallow: /import/ # Sperrung eines bestimmten Bereiches
Disallow: /mietmatch/ # Sperrung eines bestimmten Bereiches
Disallow: /sw2/ # Sperrung eines bestimmten Bereiches
Disallow: /test/ # Sperrung eines bestimmten Bereiches
# Disallow: /vaucluse/ # Sperrung eines bestimmten Bereiches
Disallow: *.php3$
User-agent: openseemox
Disallow: *.php4$
Disallow: /neuerer/
Disallow: /
User-agent: AhrefsBot
Disallow: /