Je nach Seitenaufbau und Anwendungsfall lohnt es sich, eine bestimmte Art des Crawlings zu wählen. In den Projekteinstellungen kannst du das einstellen.
Dabei kannst du zwischen dem HTML-, dem Javascript- und Mobile-Crawler wählen. Die erste Art ist besonders für schnellere Onpage-Analysen geeignet, da wir das HTML-Script ohne Zwischenverarbeitung auswerten.
Der Javasript-Crawler kommt dem Google Crawler sehr nah und ist daher der von uns empfohlene Weg. So erhältst du ein realistisches Abbild davon, wie Google deine Seite sieht.
Der Mobile-Crawler hingegen ist dem Mobile-Crawler von Google nachgebildet und untersucht deine Seite quasi auf Smartphone-Bildschirmgröße.