ok čitam malo po googlu i vidim da ako oću da zabranim bilo kakvo indexrianje sajta treba da stavim ovo u robots.txt:
Kôd:
User-agent: *
Disallow: /
E sad, ono što oću da uradim jeste da zabranim indexiranje /forum direktorijuma i svih direktorijuma unutar njega. Da li je dovoljno ovo da stavim u /forum ili moram u svaki direktorijum u njemu?
Sajt želim da bude indexiran tj sam public_html/ pa me interesuje da li će robots.txt zabraniti indexiranje višeg direktorijuma?
Možda ima neko jednostavnije rešenje za ovo? Dakle sajt da bude indexiran a /forum da ne bude...