[JovanT]

robots.txt се мора наћи у root-у домена док га у осталим директоријумима пауци неће тражити. Уколико желиш да спречиш индексирање форума, само стави

User-agent: *
Disallow: /forum

То неће спречити да остатак сајта буде индексиран.