Pa ako u robots.txt stoji Disallow: /?q=user/register/ a on je indeksirao /?q=user/register sve je regularno jer se ne radi o dva ista URL-a zbog kose crte na kraju.
Idi na Google Webmasters Tools, tamo postoji alatka da kojom možeš da proveriš da li tvoj robots.txt zaista blokira ono što želiš.
|