Große Suchmaschinen, selbstverständlich auch Google, stellen Tools für Webmaster gratis zur Verfügung. Die Google Webmaster-Tools unterstützen euch dabei, besser zu kontrollieren, wie Google mit eurer Website interagiert, und ihr erhaltet gleichzeitig nützliche Informationen über eure Site. Die Verwendung der
Vermeidet:- sehen, welche Teile einer Website von Googlebot nicht problemlos gecrawlt werden können
- auf eine XML-Sitemap-Datei hinweisen
- robots.txt-Dateien analysieren und generieren
- URLs entfernen, die bereits von Googlebot gecrawlt wurden
- die bevorzugte Domain spezifizieren
- Probleme mit Meta-Tags des Typs “title” und “description” ausfindig machen