Nach Update auf 4.03: Robots.txt sperrt Google aus

[css-umsetzung]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

warum?

du sagst doch Google wo sie liegt und gibst den Pfad dann je nach Domain mit oder ohne ssl Zusatz an oder hat sich da was bei Google geändert?

 

[Einrad-Shop]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Man gibt ja das so in der robots an

Sitemap: https://www.domain.com/export/sitemap_index.xml

Aufrufbar ist die robits.txt aber mit und ohne https.......keine ahnung ob das was ausmacht?

 

[ag-websolutions.de]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Ich versteh den Sinn einer dynamischen robots.txt nicht, daran sollte sich doch dynamisch gar nichts ändern.

Der Sinn war/ist folgender:

JTL kann im Auslieferungspaket keine robots.txt ausliefern, die bereits den (notwendigen) Eintrag für die Sitemap enthält, da diese Anweisung die -von Shop zu Shop- abweichende Shop-URL enthält.

Da es aber nun mal neben den von css-umsetzung genannten SEO-Spezis eben auch die Shop-Betreiber gibt, die GAR NICHTS machen außer zu installieren, wollte man hier auch für die diese Betreiber-Gattung eine technische Umsetzung schaffen.

Diese Umsetzung geht auch solange gut, wie eben die robots.txt sich im Auslieferungszustand befindet.

Es gibt jetzt zwei Lösungsansätze:

1.) JTL überlegt sich was, wie man auch mit einer modifizierten robot.txt umgeht

oder

2.) Wenn man als Shop-Betreiber, SEO-Spezi, oder sonst All-Wissender hingeht und ändert die robots.txt ab, dann ändert man auch gleichzeitig die htaccess ab und nimt das rewriting über die php raus

 

[testjo]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Und den anderen ist dass Problem es ist ja offt beim JTL downloads so etwas wie Robots und Htaccess, Konfigs. womit so manchen den eigene angepasste leider überschreiben.

Also das Problem kan man aber auch anders und besser angehen, ( im download separate verzeichniss) alle dieser Daten die man basic braucht mit Anleitung wie ein zu binden und dieser sind so und so geänderd worden zum beispiel..
Wen dan einer nicht weiss wie damit um zu gehen die brauchen dan SUPPORT Subscription und oder ein SP! ( ist besser dan eigene überschreiben und fehlerhaftes drin haben)

Es ist auch seit lang bekannt "JTL Kunden uploaden alles", überschreiben eigene Datein und dass dies zu problemen führen kann, dies kan man aber Kundenfreundlicher und mehr foolproof machen wen man sich mühe macht. 😉

Auch bereits mehrmals angesprochen, jetzt versucht JTL etwas aber .....

 

[christian1701]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Muss der Sitemap Eintrag eigentlich auch in die Robots.txt eines Shop3? Ich habe da (webhosting bei jtl) noch nie etwas reingeschrieben/geändert und da ist auch kein eintrag drinnen.

 

[css-umsetzung]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Ich kenne das auch so, das man die Google direkt in die Hand gibt und war leicht irritiert das sie in der robots ist,
aber ich mach selbst auch nichts im seo Bereich, eventuell bin ich da noch etwas veraltet.

 

[ag-websolutions.de]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Muss der Sitemap Eintrag eigentlich auch in die Robots.txt eines Shop3? Ich habe da (webhosting bei jtl) noch nie etwas reingeschrieben/geändert und da ist auch kein eintrag drinnen.

Muss, kann ...

https://www.ranking-check.de/blog/robots-txt-erstellen/

Es gibt ja auch noch robots außerhalb von Google

 

[christian1701]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Ja die search console zeigt keine fehler an, dann wirds wohl passen.

 

[hula1499]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

aber ich mach selbst auch nichts im seo Bereich, eventuell bin ich da noch etwas veraltet.

Nope, bist nicht.
Reicht vollkommen im WMT anzugeben.


Christian: Kannst wennst willst, aber da du ja WMT kennst, wirst sie dort ja auch eingetragen haben und mehr braucht man auch nicht.
Eigentlich braucht man eine Sitemap überhaupt nicht mehr...ein Konstrukt aus den...90ern? 😀
In Ordnung, zum Beginn einer neuen Seite mit tausenden Unterseiten um den Bots schneller eine Übersicht zu geben, aber all das brauchen Bots schon ewig nicht mehr wirklich, die finden ihre Wege schon selbst.
Christian2:
das er keine Fehler anzeigt ist ja klar, mit dem Robots eintrag "zeigt" ja nur, wo sie liegt, hat mit dem Inhalt der Sitemap ja wenig zu tun.

Ja, es gibt zwar noch andere Bots, aber im DE Raum gibts nur einen relevanten und sonst nichts.

 

[christian1701]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Eigentlich braucht man eine Sitemap überhaupt nicht mehr...ein Konstrukt aus den...90ern? 😀
In Ordnung, zum Beginn einer neuen Seite mit tausenden Unterseiten um den Bots schneller eine Übersicht zu geben, aber all das brauchen Bots schon ewig nicht mehr wirklich, die finden ihre Wege schon selbst.

Hab ich mir ja auch gedacht, desswegen verfolge ich die diskussion über die sitemaps hier mit verwunderung. Aber wenn hier manche meinen ohne sitemap eintrag geht die google welt unter wird man auch unsicher.
Die letzten Fehlermeldungen waren aus 2014. Da war mal der Shop kurz offline.

 

[testjo]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Hier geht es um den robotst.txt.

Disallow: /

Sitemap einreichen beim WMT könnte es schneller im index bringen, braucht man aber nicht richtig.
Aber wen ein Sitemap und dazu auch noch fehler damit hat, dan ist es nicht gut, da geht es drum!

 

[hula1499]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Es gibt viele myhten die schon lang keine Relevanz mehr haben, eine Sitemap ist eine davon. Ausser du bist so verschachtelt, hast ne komische interne Verlinkung das Bots zu wichtigen Seiten erst auf 10 Umwege kommen, das wird aber auf 0.0000000001% der JTL User zutreffen, wenn überhaupt und dann dauerts halt um 0.21 Tage länger, dass Google sie sieht 🙂

Google findet auch alles von selbst, Bing ist irrelvant für DE und sonst gibts eh defacto nix.

Die Robots kann andere wichtige Dinge steuern (wie aussperren von SEO Crawlern, ARchivierern, Alexa etc. - wenn man das möchte) aber das ist wieder ein anderes Kapitel.

Klar, Jo hat natürlich recht, dass ein aussperren hier kontraproduktiv wäre 🙂

 

[testjo]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Sitemap links einreichen ist auch hilfreich in WMT warum, beispiel: BilderSitemap aber Bilderlinks gibt google bot indexierung ein error mit, dan weisst man es ist etwas loss. 😉

Dass meine ich also auch wen etwas fehlerhaft ist könnte man ein warnung oder error vielleicht früher wahrnehmen dan wen man selbe nichts macht. 😉

Also fast wie ein art "debugging error anzeige" können den Sitemaps da doch hilfreich sein.

Brauch man aber gar nicht wen sein Shopsoftware und settings fehler/bug frei sind. 😉

 

[ag-websolutions.de]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

aber im DE Raum gibts nur einen relevanten und sonst nichts.

Wer es sich erlauben kann, setzt nur auf google.
Wer aber AUCH den rest mit nehmen will, der schaut hat über den terrrand ... wenn man denn will.

 

[hula1499]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Wer es sich erlauben kann, setzt nur auf google.
Wer aber AUCH den rest mit nehmen will, der schaut hat über den terrrand ... wenn man denn will.

Bitte sei doch so freundlich und klär mich/uns mit deinem allübergreifendem Fachwissen doch auf, wer denn noch in DE (JTL siehst sich ja selbst nur für den DE Markt) an Bots relvant ist, der eine Sitemap benötigt.

 

[christian1701]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Naja, es ist ja auch kein Problem sich bei den Bing Webmastertools anzumelden und die Sitemap dort einzutragen. Dauert keine 5 Minuten für 2 Shops. Habe ich eben gemacht obwohl ich bei Bing eh auch in der Suche aufscheine.

 

[css-umsetzung]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

Es gibt seos, die sagen, man sollte es unbedingt unterlassen eine sitemap einzureichen, wenn man auch statische Inhalte hat die dort nicht gelistet sind, da sich google dann nicht mehr die Mühe macht, andere links zu prüfen.

Aber das ist vermutlich alles aus der seoglaskugel gelesen. 🙂

 

[ag-websolutions.de]

AW: Nach Update auf 4.03: Robots.txt sperrt Google aus

klär mich/uns mit deinem allübergreifendem Fachwissen doch auf,

Nein, nein hula ... das Feld überlasse ich gerne dir