Na žalost problem nije bio u backlinkovima već u nekom ASP.NET bug-u. Naime, svim stranicama sajta se moglo pristupiti preko bilo kojeg web browsera, ali je Googlebot dobijao 500 internal server error za sve stranice osim za naslovnu. U to sam se uverio pregledom IIS logova. Problem je u tome što je na svim stranicama rađen URL rewrite.
Rešenje problema:
- dodati ako ne postoji
App_Browsers folder
- u njemu kreirati fajl
BrowserFile.browser sa sledećom sadržinom:
Kôd:
<browsers>
<browser refID="Mozilla">
<capabilities>
<capability name="cookies" value="true" />
</capabilities>
</browser>
</browsers>
Da bi se preko web browsera proverilo kako Googlebot vidi stranicu može se iskoristiti
user agent switcher firefox ekstenzija gde treba dodati Googlebot-a.