Citat:
|
Originalno napisao nixa
pa sto ne uradis klasican cloacking .... kad bot dodje na sajt.com/v1/index.html on ne vidi to  nego vidi sajt.com ....
a ovo resenje mislim da oni vise ne slusaju robots.txt  |
Svi slusaju robots.txt ... to je osnova
Cloackingom nemoj da se bavis osim ako potpuno neznas sta radis... to su mutna posla i ako nemas jasan plan mozes imati vise posledica nego dobitka.