Nachdem man die Entwicklung des organischen Suchmaschinenmarketings im Laufe der Jahre beobachtet hat, ist es interessant zu beurteilen, wie sehr sich die Dinge verändert haben.
Wir sind von der Keyword-Besessenheit zur Conversion-Optimierung übergegangen, buchstäblich vom ersten Eindruck bis zum Ende des Trichters. Allerdings gibt es einen sehr wichtigen Mittelpunkt: den Eingang zum Gelände.
Während der Benutzer immer das wichtigste Element der Konversation ist, müssen wir als SEOs überlegen, was wir tun, um das Interesse von Suchmaschinen zu wecken und in den Suchergebnissen mehr erste Eindrücke bei den Benutzern zu hinterlassen.
Aus der Sicht eines Suchmaschinen-Vermarkters müssen Suchmaschinen den Zugriff auf die Website erleichtern, bevor der Benutzer die Website erreicht: Sie müssen die Website schnell crawlen, ohne dass es zu Problemen, Reisen oder Verwirrung kommt.
Wenn Sie Maßnahmen ergreifen, um die Qualität des Pfads Ihrer Website für Suchmaschinen zu verbessern, tun Sie dasselbe auch für die Benutzer. In diesem Artikel wird eine kurze Liste von Website-Überlegungen und Kontrollpunkten zusammengestellt, die Sie verwenden sollten, um die Tür Ihrer Website für das Crawlen durch Suchmaschinen weit offen zu halten.
Werfen wir einen Blick darauf, worauf Sie achten müssen und welche Tools Ihnen dabei helfen können, dorthin zu gelangen.
Die Verbindung
Werkzeug: Pingdom-Website-Geschwindigkeitstest

Bevor wir überhaupt daran denken können, dass eine Suchmaschine auf Ihre Website zugreift, müssen wir darüber nachdenken, wie gut Ihre Website mit ihrem Server und den Eigenschaften kommuniziert, die Seitendateien anfordern.
Die erste Überlegung, die ich anstellen möchte, besteht darin, Ping und Traceroute zu testen, um herauszufinden, ob es Probleme mit der Netzwerkkonnektivität gibt.
Während ich dieses Tool verwende, möchte ich auch eine Überprüfung des Domain Name Servers (DNS) durchführen, um herauszufinden, ob es irgendwelche Domain-Autorisierungsprobleme gibt, die Suchmaschinen zum Stolpern bringen könnten, bevor sie tatsächlich in die Tür gelangen.
Ein weiterer Bereich, den Sie überprüfen möchten, sind Daten direkt aus der Quelle über Google Analytics. Im Abschnitt „Verhalten >> Website-Geschwindigkeit >> Seitenzeiten“ sollten Sie Kennzahlen wie „Durchschn. Weiterleitungszeit“, „Durchschn. Domain-Suchdomäne, durchschnittlich. Serververbindungszeit und Durchschnitt. Antwortzeit des Servers.

Das Offensichtliche
Instrumente: Google Search Console und Sitemap Writer Pro
Ich nenne dies „das Offensichtliche“, da es tatsächlich der Ausgangspunkt für Suchmaschinen auf einer Website ist. Es ist die Grundlage von SEO.
Wenn Sie sich jedoch aus SEO-Sicht damit nicht auskennen, kann dies Sie schnell stoppen.

Sie müssen einen Blick auf Google Search Console >> Crawl >> Robots.txt Tester werfen, um zu bewerten, wie Google Ihre robots.txt-Datei versteht und was sie nicht sehen sollen.
Dies ist auch eine gute Gelegenheit für Sie, Ihre Ausschlüsse zu überprüfen und zu verstehen, ob Sie kritische Suchinhalte aus der Sicht des Crawlers verdrängen.
Lassen Sie die wichtigsten Seiten Ihrer Website durch den Tester laufen und stellen Sie sicher, dass Sie nicht einen der grundlegendsten SEO-Fehler machen.
Stellen Sie außerdem sicher, dass Sie über eine aktuelle XML-Sitemap für die Seiten, Bilder und Videos Ihrer Website verfügen, damit Suchmaschinen über die Google Search Console und die Bing Webmaster-Tools immer über ein Verzeichnis aller Seiten Ihrer Website verfügen. Sie sollten diese regelmäßig besuchen.
Laden der Seite
Instrumente: Pingdom Website-Geschwindigkeitstest und Google PageSpeed Insights
Die Ladezeit einer Seite ist seit Jahren ein Rankingfaktor. Beim Laden von Seiten gilt es als bewährte Vorgehensweise, sicherzustellen, dass der CSS- und JavaScript-Code zu Referenzzwecken in XRef-Dateien und in möglichst wenigen Dateien gespeichert wird.
Ich finde, dass viele Leute diese Best Practices befolgen, aber ein Bereich, der oft vergessen wird, sind Auslagerungsdateien in der Seitenladesequenz, bei denen es sich entweder um tote 404-Dateien handelt oder um Dateien, die auf eine andere URL umleiten.
Auch wenn eine Weiterleitung nicht das Schlimmste ist, kostet sie das Crawling durch Suchmaschinen dennoch Zeit. Bei angeforderten toten Dateien handelt es sich lediglich um einen Fortschritt, der die Suchmaschine zum Stolpern bringt.

Wir haben erneut das Pingdom-Geschwindigkeitstest-Tool verwendet, da das Wasserfall-Tool über eine großartige Funktion zum Laden von Seiten verfügt.
Während bestimmte Seitenladeanforderungen lange dauern, können Sie nach farbcodierten Dateinamen suchen, die auf inaktive Dateien oder umgeleitete Dateien hinweisen, die im Code vermerkt sind.
Da wir gerade beim Thema umgeleitete Dateien sind, besteht eine weitere Möglichkeit, das Crawlen von Websites zu vereinfachen, darin, interne Links umzuleiten. Mithilfe von Tools wie Xenus Link Sleuth und SEMrush Site Audits können Sie Einblick in defekte oder umgeleitete interne Links gewinnen.
Seitenrendering
Werkzeug: Google Search Console (Als Googlebot erkunden und blockierte Ressourcen)
Sie haben diesen Punkt erreicht und Ihre Website kommuniziert gut mit Anfragen und Dateien werden effektiv hochgeladen. Wie sehen Suchmaschinen das? Nur weil es Ihren Inhalt lädt, heißt das nicht, dass es den Crawler nicht stört.
Im Abschnitt „Als Googlebot erkunden“ der Google Search Console möchten Sie sehen, ob die Darstellung Ihrer Seite für Suchmaschinen und Nutzer gleich ist.
Indem Sie dies sowie den Abschnitt „Blockierte Ressourcen“ überprüfen, haben Sie eine zweite Chance zu überprüfen, ob Anfragen zum erneuten Laden von Seiten aufgrund von Serverineffizienzen ablaufen oder ob robots.txt-Ausschlüsse im Spiel sind.

Duplizierung von Inhalten oder Verschwendung von Crawling
Instrumente: SEMrush Site Audit, SiteLiner und manuelle Überprüfung
Die Tracker sind ohne Hindernisse an der Tür und können das Gelände passieren.
Ich habe bereits die Überlegungen zu umgeleiteten oder defekten internen Links erwähnt, und wir könnten tiefer auf Navigationslinks eingehen, aber einen Punkt, den ich erwähnen möchte, ist das Crawlen von Abfall und der unwissentliche Besitz von doppelten Inhalten.
Denken Sie darüber nach, wie Crawler Zeit auf Ihrer Website verbringen: Möchten Sie, dass diese Zeit so schnell wie möglich abläuft, oder möchten Sie sie mit Seiten verärgern, die Duplikate zuvor gecrawlter Inhalte sind?
Es gibt mehrere Tools, die doppelte Inhalte von SiteLiner bis SEMrush identifizieren können. Normalerweise genieße ich es jedoch, „site:“-Suchen durchzuführen und durch das Scrapen von Kopiersätzen oder Titelelementen Identifikatoren hinzuzufügen.
Sie können häufig doppelte Inhalte auf mehreren Seiten einer Domain oder doppelte Inhalte auf Subdomains einer Domain-Eigenschaft finden.
Abschluss
Natürlich können wir nicht das gesamte Spektrum dessen abdecken, was beim Öffnen oder Schließen der Tür zu einer Suchmaschine zu beachten ist, aber ich habe die häufigsten Bereiche überprüft, in denen ich gesehen habe, dass Websites Fehler gemacht haben.
Hoffentlich denken Sie jetzt über Suchmaschinen-Crawling nach, bei dem versucht wird, auf die Website zu gelangen, an die Tür zu klopfen, sie zu öffnen und ihnen einen zufriedenstellenden Rundgang durch Ihre Website zu ermöglichen.
Josh McCoy ist der leitende SEO/PPC/Social-Media-Stratege bei Vizion Interactive. Sie können sich mit Josh auf LinkedIn verbinden.
