User-agent : *
Disallow: /login
Disallow: /bitrix
Disallow: /bitrix/admin
Disallow: /forum
Disallow: /wstat
Crawl-delay: 10 # задает таймаут в 4.5 секунды