{"id":848149,"date":"2023-09-19T02:48:12","date_gmt":"2023-09-19T07:48:12","guid":{"rendered":"https:\/\/blogging-techies.com\/ge\/technisches-seo-auf-das-crawlen-kommt-es-an\/"},"modified":"2023-09-19T02:48:12","modified_gmt":"2023-09-19T07:48:12","slug":"technisches-seo-auf-das-crawlen-kommt-es-an","status":"publish","type":"post","link":"https:\/\/blogging-techies.com\/ge\/technisches-seo-auf-das-crawlen-kommt-es-an\/","title":{"rendered":"Technisches SEO: Auf das Crawlen kommt es an"},"content":{"rendered":"<p><center><\/center><\/p>\n<p>W\u00e4hrend meiner T\u00e4tigkeit im SEO-Bereich (\u00fcber 12 Jahre) habe ich viele, viele Leute gesehen, die behaupteten, sie w\u00fcrden \u201eSEO betreiben\u201c.  Von Designern bis hin zu Content-Vermarktern, PPC-Leuten, PR-Leuten und Social-Media-Leuten.  Jeder m\u00f6chte im Spiel sein.<\/p>\n<p>Das ist gro\u00dfartig&#8230; diese Leute haben ihren Platz.<\/p>\n<p>Aber bei SEO beginnt alles mit dem \u201eCrawling\u201c.<\/p>\n<p>Wenn Suchmaschinen Ihre Website nicht crawlen oder Ihre Seiten nicht indizieren k\u00f6nnen, wird der gesamte Inhalt der Welt nicht viel bewegen.  Sie k\u00f6nnen sogar viele tolle Backlinks generieren und bleiben trotzdem im Dreck stecken.<\/p>\n<p>Einige Websites sind recht einfach zu crawlen.  Ich meine, wenn Ihre Website im Allgemeinen \u201estatisch\u201c und auf einfache Weise aufgebaut ist (WordPress mit einigen Plugins?), werden Sie wahrscheinlich keine Probleme haben.  Allerdings gibt es immer noch viele F\u00e4lle, in denen Websites Schwierigkeiten haben, eine optimale Indexierung zu erreichen.<\/p>\n<h2>Fallstudie<\/h2>\n<p>Mein Unternehmen hat k\u00fcrzlich einen neuen Kunden eingestellt, der allem Anschein nach und unserer ersten Analyse zufolge bereits im Februar 2011 von Google Panda betroffen war.  Die Beweise schienen ziemlich klar:<\/p>\n<p><img decoding=\"async\" loading=\"lazy\" class=\"center\" title=\"Semrushchart\" src=\"https:\/\/blogging-techies.com\/wp-content\/uploads\/2022\/01\/1641837083_872_SEO-tecnico-todo-se-trata-del-rastreo.jpg\" alt=\"Semrushchart\" width=\"445\" height=\"132\" border=\"0\"><\/p>\n<p>Jahrelang entschied sich mein Kunde daf\u00fcr, \u201ewie bisher weiterzumachen\u201c, ohne viel \u00fcber SEO nachzudenken oder dar\u00fcber nachzudenken.  Sie verdienten immer noch Geld mit Marketing \u00fcber PPC, E-Mail und andere traditionellere Mittel.<\/p>\n<p>Dann beschlossen sie, dass es an der Zeit war, mit allen anderen gleichzuziehen und etwas Zeit, Geld und, ja, Geduld in den Prozess zu investieren, ihre organische Suchpr\u00e4senz wiederzugewinnen.<\/p>\n<p>Diese spezielle Website ist eine E-Commerce-Website und \u00e4hnelt vielen anderen, die Produkte weiterverkaufen.  Alle Produktbeschreibungen werden an viele andere weitergegeben, die diese identischen Produkte ebenfalls weiterverkaufen.  \u201eEinfach genug\u201c, dachten wir uns \u2026 wir werden eine Reihe von Produktbeschreibungen neu schreiben und uns dann an die Optimierung der Ergebnisse machen.<\/p>\n<p>Nicht so schnell.<\/p>\n<p>Wie sicher viele von Ihnen haben wir die Initiative mit einem \u201eAudit\u201c gestartet.  Wir wollten alles ganzheitlich betrachten, um einen strategischen Ansatz f\u00fcr die Bem\u00fchungen sicherzustellen.  Bis wir begannen, eine scheinbar endlose Liste technischer Probleme, Fehltritte und Weiterleitungen (im wahrsten Sinne des Wortes) zu entdecken, die uns dazu veranlassten, auf den \u201etypischen Prozess\u201c zu verzichten und uns viel tiefer mit der R\u00fcckverfolgbarkeit\/Indexierbarkeit zu befassen.<\/p>\n<p>\u201eDas Wichtigste zuerst\u201c, hei\u00dft es.<\/p>\n<p>Mithilfe der Wayback Machine konnten wir einen R\u00fcckblick auf die Website von Dezember 2010 bis Februar 2011 werfen (das Analyseprofil war aus diesem Zeitraum verloren gegangen; die Entwickler, die zu diesem Zeitpunkt an der Website gearbeitet hatten, standen nicht mehr als Referenz zur Verf\u00fcgung). ).  Damit begann unser Lernprozess dar\u00fcber, worauf wir uns eingelassen hatten.  Einige \u201eGenies\u201c beschlossen, alle ihre URLs neu zu schreiben (ohne ersichtlichen Grund einen Ordner einzuf\u00fcgen), keine suchmaschinenfreundliche URL-Struktur mehr zu verwenden (z. B. firmenname.com\/category\/product\/name-from-product) und dann eine 302-Weiterleitung vorzunehmen alles zu diesen neuen URLs.  Das war\/ist einfach schlecht.  Dann kam es zu einer Reihe reflexartiger Reaktionen auf Verluste, die zur Umsetzung fast aller bekannten schlechten SEO-Praktiken f\u00fchrten.<\/p>\n<p>Wir haben die versprochene Kopie schnell umgeschrieben und den \u201eSpielplan\u201c verworfen, um an einigen SEO-technischen Details zu arbeiten.<\/p>\n<p>Als Erstes mussten wir pr\u00fcfen, ob die Bots die Website ordnungsgem\u00e4\u00df crawlen konnten.<\/p>\n<p><strong>Google Webmaster Tools:<\/strong> W\u00e4hrend die Google Webmaster-Tools liefen, waren Sitemaps veraltet.  Anstatt Sitemaps einfach erneut einzureichen, haben wir neue Sitemaps generiert, kategorisiert nach Abschnitt der Website, den wir analysieren wollten (Startseite, Blog, XYZ-Produkte, ABC-Produkte usw.).  Das ist vielleicht das Beste, was wir gemacht haben.  Es hat uns geholfen, Bereiche der Website, die nicht indiziert wurden, vollst\u00e4ndig zu isolieren.<\/p>\n<p><strong>Logfile-Analyse:<\/strong> Wir hatten den Verdacht, dass Scraper aktiv auf die Website unseres Kunden abzielten.  Eine Logfile-Analyse best\u00e4tigte dies.  Wir konnten einige IP-Adressen isolieren und sie am Crawlen der Website hindern.  Wir wollten auch nach verr\u00e4terischen Anzeichen daf\u00fcr suchen, dass Bots Schwierigkeiten beim Crawlen der Website hatten.<\/p>\n<p><strong>Inhaltsanalyse:<\/strong> Da wir immer noch glaubten, dass Panda im Spiel sein k\u00f6nnte, und viele andere Websites mit doppelten (gestohlenen) Inhalten identifizieren konnten, mussten wir noch nach F\u00e4llen suchen, in denen wir m\u00f6glicherweise Duplikate auf unserer eigenen Website erstellt hatten.  Auch wenn dies in vielen Tools\/Crawlings nicht leicht zu erkennen ist, konnten wir durch die Anzeige zwischengespeicherter Versionen von Seiten, von denen wir festgestellt hatten, dass sie problematisch sind, erkennen, dass bei unserem Kunden \u201ePop-up\u201c-Inhalte indiziert waren.  Dieser Popup-Inhalt war f\u00fcr den Benutzer wichtig (er wusste, ob ein Produkt nicht vorr\u00e4tig war usw.), aber dieser Inhalt war auch auf jeder Produktseite vorhanden, unabh\u00e4ngig davon, ob das Produkt nicht vorr\u00e4tig war oder nicht.  Es war im Google-Cache.  Prozentual gesehen machte dieser \u201eJunk\u201c-Inhalt eine gro\u00dfe Zahl aus.  Vielleicht die H\u00e4lfte des Textinhalts auf ihren Seiten bezog sich auf nicht vorr\u00e4tige oder \u201enicht verf\u00fcgbare\u201c Inhalte.  Glauben Sie, dass Suchmaschinen das gerne lesen?  Glauben Sie, dass sie diese Seiten indizieren wollen?  Unsere Gedanken?  &#8220;Wahrscheinlich nicht&#8221;.<\/p>\n<p><strong>DNS-Probleme:<\/strong> W\u00e4hrend wir uns mit potenziellen technischen Problemen befassten, wollten wir wissen, ob es DNS-Probleme f\u00fcr die Domain gab.  Wir wollten sicherstellen, dass es keine Probleme mit der Einrichtung der Domain gibt und auch keine Hindernisse auftreten, wenn die Site \u201eaufgerufen\u201c wird und der Server mit der Kommunikation beginnen muss.  Wir sind auf ein kleines Problem auf der DNSSEC-Ebene gesto\u00dfen, bei dem es der Delegation an Kommunikation mangelte und sie nicht validiert werden konnte.  Dies wurde korrigiert.<\/p>\n<p><img decoding=\"async\" loading=\"lazy\" class=\"center\" title=\"DNSsec-Bild\" src=\"https:\/\/blogging-techies.com\/wp-content\/uploads\/2022\/01\/1641837084_553_SEO-tecnico-todo-se-trata-del-rastreo.jpg\" alt=\"DNSsec-Bild\" width=\"370\" height=\"229\" border=\"0\"><\/p>\n<p><strong>Website-Sicherheit\/Cross-Site Scripting (XSS)\/: <\/strong>Als wir einige Seitenabfragen in Suchmaschinen durchf\u00fchrten, stie\u00dfen wir auf einen Vorfall, bei dem wir auf die Website des Kunden klickten und die Meldung erhielten, dass die Website \u201enicht vertrauensw\u00fcrdig\u201c sei.  Wir beschlossen, die Website auf Malware zu \u00fcberpr\u00fcfen.  Hierf\u00fcr verwenden wir Zed Attack Proxy.  Wie sich herausstellte, lieferte die Website des Kunden bei unserem Test tats\u00e4chlich ein \u201epositives\u201c (was eigentlich \u201enegatives\u201c bedeutet) Ergebnis.  Und es stellte sich heraus, dass es sich nicht wirklich um XSS handelte, sondern eher um ein \u201efalsches\/positives\u201c Ergebnis aufgrund der Art und Weise, wie ihre Software verschiedene Aufgaben im Backend ausf\u00fchrte.  Aber wenn ein Tool Probleme anzeigt, warum sollte eine Suchmaschine dann nicht denken, dass es Probleme gibt?<\/p>\n<p><strong>Handy, Mobiltelefon:<\/strong> Hier gab es keine schnelle L\u00f6sung, da der Kunde eine mobile App nutzt und (noch) keine responsive Website betreibt.  Dies kommt bald, aber wir arbeiten mit ihrer mobilen App daran, mindestens eine Eins-zu-eins-Zuordnung f\u00fcr alle Seiten zu erhalten (derzeit leiten Sie alle Seiten auf Mobilger\u00e4ten zur Startseite weiter, da sie \u00fcber eine \u201eAssistenten\u201c-App verf\u00fcgen).  um es durch den Verkaufsprozess zu schieben).<\/p>\n<p><strong>JavaScript\/CSS:<\/strong> Der Client blockierte JS und CSS f\u00fcr Bots.  Wie Google letztes Jahr bekannt gab, ist das keine gute Sache.<\/p>\n<p><img decoding=\"async\" loading=\"lazy\" class=\"center\" title=\"googlewebmastercentral\" src=\"https:\/\/blogging-techies.com\/wp-content\/uploads\/2022\/01\/1641837085_331_SEO-tecnico-todo-se-trata-del-rastreo.jpg\" alt=\"googlewebmastercentral\" width=\"677\" height=\"89\" border=\"0\"><\/p>\n<p><strong>URL-Strukturen:<\/strong> Dieser Client verwendete eine recht g\u00e4ngige Methode zur URL-Generierung, die in der Vergangenheit (wahrscheinlich) gut funktioniert hat.  Platzieren Sie also alle Produktseiten direkt au\u00dferhalb des Stammverzeichnisses der Domain (Firmenname.com\/Produktname).  Ich war immer davon \u00fcberzeugt, dass das tats\u00e4chlich funktioniert, aber das sollte nicht der Fall sein.  Suchmaschinen sollten intelligenter sein.  Aufgrund der j\u00fcngsten \u00c4nderungen am mobilen Algorithmus bin ich jetzt ein starker Bef\u00fcrworter von URL-Strukturen, die der Website-Struktur (und den damit verbundenen Breadcrumbs) folgen.  Wir haben jetzt alle URLs in ein korrektes Format umgeschrieben und Kategorieseiten hinzugef\u00fcgt, wo es vorher keine gab.<\/p>\n<p>Wir haben so viele \u00c4nderungen vorgenommen (und die Dinge sind immer noch nicht dort, wo sie letztendlich sein sollten), dass wir jetzt einen Schritt zur\u00fccktreten und \u00fcber den strategischeren Ansatz nachdenken k\u00f6nnen, der seit langem geplant war.  Wir k\u00f6nnen jetzt Dinge wie die Analyse von Inhaltsl\u00fccken, Verbesserungen der Informationsarchitektur, ein Website-Redesign, eine Social-Media-Strategie, \u00d6ffentlichkeitsarbeit und die Optimierung der Benutzerfreundlichkeit\/Konversionsrate in Betracht ziehen.  All diese Dinge sind sicherlich wichtig, aber alles beginnt mit der Nachverfolgung.<\/p>\n   ","protected":false},"excerpt":{"rendered":"<p>W\u00e4hrend meiner T\u00e4tigkeit im SEO-Bereich (\u00fcber 12 Jahre) habe ich viele, viele Leute gesehen, die behaupteten, sie w\u00fcrden \u201eSEO betreiben\u201c. Von Designern bis hin zu Content-Vermarktern, PPC-Leuten, PR-Leuten und Social-Media-Leuten. Jeder m\u00f6chte im Spiel sein. Das ist gro\u00dfartig&#8230; diese Leute haben ihren Platz. Aber bei SEO beginnt alles mit dem \u201eCrawling\u201c. Wenn Suchmaschinen Ihre Website [&hellip;]<\/p>\n","protected":false},"author":1,"featured_media":848150,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":"","fifu_image_url":"https:\/\/blogging-techies.com\/wp-content\/uploads\/2023\/06\/1_.png","fifu_image_alt":""},"categories":[7],"tags":[],"_links":{"self":[{"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/posts\/848149"}],"collection":[{"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/comments?post=848149"}],"version-history":[{"count":0,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/posts\/848149\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/media\/848150"}],"wp:attachment":[{"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/media?parent=848149"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/categories?post=848149"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/blogging-techies.com\/ge\/wp-json\/wp\/v2\/tags?post=848149"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}