Was ist technisches SEO? Leitfaden zu Crawling, Indexierung und Website-Optimierung

Technisches SEO beschäftigt sich damit, ob Suchmaschinen Website-Seiten entdecken, crawlen und verstehen können. Dazu gehören robots.txt, Indexierungsanweisungen, kanonische URLs, Sitemaps, Seitenleistung und strukturierte Daten. Dieser Leitfaden erklärt häufige technische Probleme und praktische Prüfungen zur Verbesserung der Zugänglichkeit und Indexierungsqualität.

Was ist technisches SEO?

Technisches SEO umfasst die technischen Aspekte einer Website, die Suchmaschinen dabei helfen, Seiten zu entdecken, zu crawlen, zu rendern und zu verstehen. Dazu gehören die Website-Architektur, Crawl-Steuerung, Indexierungsanweisungen, kanonische URLs, Leistung, mobile Nutzbarkeit und strukturierte Daten.

Technisches SEO garantiert keine besseren Rankings. Es soll technische Hindernisse reduzieren, damit Suchmaschinen auf nützliche Inhalte zugreifen und diese zuverlässiger interpretieren können.

Crawling und Indexierung sind unterschiedliche Prozesse

  • Crawling: Eine Suchmaschine ruft eine URL auf und lädt deren Inhalte oder Ressourcen ab.
  • Indexierung: Die Suchmaschine bewertet eine Seite und kann sie in ihrem Index speichern, um sie für Suchergebnisse zu berücksichtigen.

Eine Seite kann crawlbar sein, ohne indexiert zu werden. Ebenso garantiert die Erlaubnis zum Crawling weder die Indexierung noch gute Rankings. Untersuchen Sie Crawling- und Indexierungsprobleme getrennt.

Wichtige Elemente des technischen SEO

1. robots.txt

Die Datei robots.txt gibt kompatiblen Crawlern Anweisungen zum Crawling bestimmter Pfade eines Hosts. Sie eignet sich zur Steuerung des Crawl-Zugriffs, ist aber kein zuverlässiges Mittel, um eine URL vollständig aus Suchergebnissen auszuschließen. Eine blockierte URL kann trotzdem indexiert werden, wenn Suchmaschinen sie über andere Signale entdecken.

2. Meta-Robots-Anweisungen

Meta-Robots-Tags und unterstützte HTTP-Header können Indexierungsanweisungen wie noindex enthalten. Suchmaschinen müssen eine Seite in der Regel crawlen, um ihre Meta-Robots-Anweisung zu lesen. Blockieren Sie eine Seite nicht in robots.txt, wenn der Crawler auf sie zugreifen muss, um die Anweisung noindex zu erkennen.

3. Kanonische URLs

Ein Canonical-Link kennzeichnet die bevorzugte URL unter doppelten oder ähnlichen Seiten. Canonicalisierung ist ein Signal und kein absoluter Befehl. Halten Sie daher interne Links, Weiterleitungen, Sitemaps und Canonical-Tags möglichst konsistent.

4. XML-Sitemaps

Eine XML-Sitemap hilft Suchmaschinen, wichtige URLs zu entdecken. Nehmen Sie kanonische, indexierbare URLs auf und halten Sie die Sitemap aktuell. Die Einreichung garantiert weder Crawling noch Indexierung oder Ranking.

5. Seitenleistung

Ladegeschwindigkeit und Interaktionsfähigkeit beeinflussen die Benutzererfahrung. Prüfen Sie die Core Web Vitals, darunter Largest Contentful Paint (LCP), Interaction to Next Paint (INP) und Cumulative Layout Shift (CLS). Optimieren Sie Bilder, JavaScript, Caching, Serverantwortzeiten und Layoutstabilität, wenn Messungen Probleme zeigen.

6. Mobile Nutzbarkeit und Barrierefreiheit

Stellen Sie sicher, dass wichtige Inhalte und Funktionen auf Mobilgeräten funktionieren. Verwenden Sie gut lesbaren Text, klare Navigation, aussagekräftige Linktexte, barrierefreie Formularelemente und semantisches HTML. Verbesserungen der Barrierefreiheit können auch die Seitenstruktur verständlicher machen, obwohl Barrierefreiheit und Ranking nicht dasselbe sind.

7. Strukturierte Daten

Strukturierte Daten können Suchmaschinen helfen, unterstützte Inhaltstypen zu interpretieren, und Seiten für bestimmte Suchfunktionen qualifizieren. Verwenden Sie einen passenden Schema-Typ, stellen Sie die Übereinstimmung mit sichtbaren Inhalten sicher und validieren Sie die Implementierung. Korrekte Markierungen garantieren kein Rich Result.

Häufige technische SEO-Probleme

  • Wichtige Seiten liefern Fehler oder werden unerwartet weitergeleitet.
  • Interne Links verweisen auf veraltete, weitergeleitete oder nicht kanonische URLs.
  • Seiten, die indexiert werden sollen, enthalten versehentlich noindex.
  • robots.txt blockiert Ressourcen oder Seiten, auf die Crawler zugreifen müssen.
  • Doppelte URLs weisen widersprüchliche Canonical-Signale auf.
  • Sitemaps enthalten Weiterleitungen, Fehler oder nicht indexierbare URLs.
  • Das JavaScript-Rendering verhindert, dass wichtige Inhalte oder Links entdeckt werden.
  • Langsame Seiten oder instabile Layouts beeinträchtigen die Benutzererfahrung.

Praktische Checkliste für technisches SEO

  1. Prüfen Sie wichtige URLs auf HTTP-Statuscodes und unerwartete Weiterleitungen.
  2. Stellen Sie sicher, dass vorgesehene Seiten crawlbar sind und passende Indexierungsanweisungen besitzen.
  3. Prüfen Sie die Konsistenz von Canonical-Tags, internen Links und Sitemap-URLs.
  4. Nutzen Sie Webmaster-Tools der Suchmaschinen, um Indexierungsberichte und repräsentative URLs zu untersuchen.
  5. Testen Sie mobile Layouts und messen Sie die Core Web Vitals.
  6. Validieren Sie strukturierte Daten und vergleichen Sie diese mit sichtbaren Inhalten.
  7. Untersuchen Sie Serverprotokolle und Crawl-Daten, um den Zugriff der Suchmaschinen zu verstehen.
  8. Überprüfen Sie wichtige Seiten nach technischen Änderungen erneut.

Wie überwacht man technisches SEO?

Verwenden Sie Webmaster-Tools, Website-Crawler, Serverprotokolle, Leistungsberichte und URL-Prüfwerkzeuge gemeinsam. Ein einzelner Bericht erklärt selten alle Probleme. Priorisieren Sie Fehler nach ihren Auswirkungen auf wichtige Seiten, die Benutzererfahrung und die Zugänglichkeit für Suchmaschinen.

Zusammenfassung

Technisches SEO hilft Suchmaschinen, Website-Inhalte zu entdecken und zu verstehen, indem Crawling-Zugriff, Indexierungssignale, Canonicalisierung, Leistung und strukturierte Daten verbessert werden. Regelmäßige Prüfungen und evidenzbasierte Korrekturen schaffen eine solide Grundlage für nachhaltige Sichtbarkeit in Suchmaschinen.