crawler

  1. Neu Google Crawler mit Jugendschutz

    Hallo, ich weiß nicht, ob dieses Forum hier richtig ist. Wenn nicht, bitte verschieben. Ich habe meinen Shop aufgebaut und bin dabei, dass auch Google meine Webseite und Produkte findet. Jetzt lese ich mich in die Konfiguration der SEO Metadaten ein. Nur funktioniert der Crawler von Google...
  2. JTL Shop Sitemap Probleme Allgemeiner HTTP Fehler bei Google

    Liebe JTL-Community, Seit kurzem bin ich beim Start des eigenen Onlineshops mit JTL Shop 5 angekommen. Während die grundlegenden Schritte rund um Bezahlmethoden, E-Mail Versand etc. gut liefen, verzweifel ich gerade etwas an der Sitemap-Übermittlung an Google. vorab: der Webshop existiert...
  3. Neu Weiterleitungen von URLs mit Endungen php, css, .js und sitemap

    Es entstehen häufig Einträge mit fehlenden Weiterleitungen, die in der URL die Kombinationen php css .js sitemap etnhalten (bei "Sitemap" also nicht die Endung). Warum ist das so? Entsteht das durch Crawler? Ist es seotechnisch problematisch, das zu unterbinden? Wenn nein, wie kann das...
  4. Neu Google Search Console Crawlingfehler %22

    Hi Leute! Wir haben einige Probleme mit der Google Search Console. Wir bekommen 404 Fehler weil der Crawler einige Seiten nicht finden kann. Er versucht wohl einige unserer URLs in "%22" zu setzen. Hier ein Beispiel %22Bad/%22. Ich habe mir den Quellcode der Seite angeschaut. Da weist nichts...
  5. Neu Suchanfragen durch Roboter blockieren?

    Hallo, wir haben öfters das Problem, dass irgendein Crawler ohne Ende Suchanfragen durch die "Suche" jagt und entsprechend Kosten durch Mehrklicks die über den Tarif hinausgehen generiert. Hat jemand eine Idee wie man das verhindern könnte?