# Не индексировать картинки
User-agent: msnbot-media
User-agent: Googlebot-Image
User-agent: Yahoo-MMCrawler
Host: vladmama.ru

Disallow: /

# Yahoo и MSN
# Только эти кадры понимают Crawl-delay
User-agent: Slurp
User-agent: msnbot
Crawl-delay: 60
Host: vladmama.ru

# Это для гугла
User-agent: Googlebot
Disallow: /forum/*&view=previous$
Disallow: /forum/*&view=next$
Disallow: /forum/posting
Disallow: /forum/export.php
Disallow: /forum/tellafriend
Disallow: /forum/topic_view_users
Disallow: /forum/printview
Disallow: /forum/privmsg
Disallow: /forum/profile
Disallow: /forum/login
Disallow: /forum/search
Host: vladmama.ru

# Рамблер (Тоже умеет по подстроке, но не понимает $)
#User-agent: StackRambler
Host: vladmama.ru


# Все остальные
User-agent: *
Disallow: /forum/posting
Disallow: /forum/tellafriend
Disallow: /forum/topic_view_users
Disallow: /forum/printview
Disallow: /forum/privmsg
Disallow: /forum/profile
Disallow: /forum/login
Disallow: /forum/search
Disallow: /forum/shoutbox
Disallow: /forum/download
Disallow: /bnrs/
Host: vladmama.ru

#Request-rate: 1/5         # maximum rate is one page every 5 seconds
#Visit-time: 0600-0845     # only visit between 6:00 AM and 8:45 AM UT (GMT)

#YaDirectBot
#???
#Revisit-After