Robot.txt bei neuem Shophosting

  • JTL-Connect 2022: Ihr habt noch kein Ticket? Jetzt schnell sichern! Die PreConnect ist bereits ausgebucht, auch für die After-Show-Party auf der Ocean Diva sind nur noch wenige Plätze verfügbar! HIER geht es zum Ticketverkauf

  • Das Stable Release von JTL-Wawi 1.6 ist startklar: HIER gehts zum Forenbeitrag

Armystore

Mitglied
30. August 2021
10
1
Hallo,

Ich habe einen Shop 5 bei JTL neu gehostet. Ein Testshop wurde übernommen.
Die Robot.txt schaut so aus.
User-agent: *
Disallow:

sonst sind keinerlei Einträge vorhanden.
Gehe ich nun richitg in der Annahme das dadurch mein Shop nicht gecrawlt werden darf, da kompletter Zugriff verweigert wird ?
Ich hatte den Support angeschrieben und zwischenzeitlich folgene robot.txt erstellt.
User-agent: *
Allow: /
Sitemap: https://xxx/sitemap_index.xml
User-agent: Googlebot
Allow: /
User-agent: Googlebot-image
Allow: /
Disallow: /navi.php
Disallow: /druckansicht.php
Disallow: /suche.php
Disallow: /bestellabschluss.php
Disallow: /bestellvorgang.php
Disallow: /jtl.php
Disallow: /pass.php
Disallow: /registrieren.php
Disallow: /warenkorb.php
Disallow: /admin
Disallow: /admin/*
Disallow: /dbeS/*

Heute morgen dann die Rückmeldung vom Support das die Robot.txt auf die obige erste zrück gesetzt wurde.

Was wäre den nun Richtig ?

Gruß Marco
 

en001

Sehr aktives Mitglied
15. März 2017
356
37
Die obige ist richtig.

Wenn nichts geperrt wird ist crawlen erlaubt.

Disallow:
und
Allow : /

sind gleichwertig.

Der alte Standard der robots.txt von der Shopversion 4 war ja nicht richtig.
 

Armystore

Mitglied
30. August 2021
10
1
Vielen Dank für dein Antwort
Ich werde es mal so stehen lassen, und schauen was Google und co. so dazu sagt :)

Gruß
Marco
 
Ähnliche Themen
Titel Forum Antworten Datum
Neu robots.txt: Kann/sollte man Seiten mit anhängendem Parameter ausschließen Installation / Updates von JTL-Shop 6
Neu Wichtiger Hinweis: Fehler bei Bestandsabgleichen/Amazon-Angebote Amazon-Anbindung - Fehler und Bugs 0
Neu Track&Trace bei PRIME durch Verkäufer mit DHL - Pakete werden nicht an T&T übergeben JTL-Track&Trace - Fehler und Bugs 0
Neu leerer Export bei Unicorn-Artikel (WaWi v. 1.6) JTL-Ameise - Fehler und Bugs 0
Neu Management Studio, bei Eigenschaften Fehlermeldung Installation von JTL-Wawi 0
JTL <-> Gambio .. geänderte Artikel werden bei Gambio in die Kategorie "TOP" geschoben, obwohl bei JTL richtige Kategorie angegeben ist.. :-(I JTL-Wawi 1.6 0
Neu Ebay Angebotsvorlage - falscher Preis bei Kinderartikel eBay-Anbindung - Fehler und Bugs 1
Neu DHL Wunschpaket Plugin JTL Shop 4 - Bestellvorgang verwehren bei fehlender Auswahl/Eingabe Plugins für JTL-Shop 0
Neu Probleme bei All-Inkl. - zu viele Anfragen des Workers führen zu Limitierung der IP / Sauberer Abgleich unmöglich Betrieb / Pflege von JTL-Shop 4
Neu PAYPAL Plugin 2.1.2. zeigt bei JTL SHOP 5.1.4 unsere Bestellnummern nicht mehr an JTL-Shop - Fehler und Bugs 1
Neu Mehrere Rückhaltegründe bei einer Bestellung möglich? User helfen Usern - Fragen zu JTL-Wawi 4
In Diskussion Automatische Mail an den KD. bei erfolgreichen PayPal und AmazonPay Zahlungen? JTL-Workflows - Ideen, Lob und Kritik 4
Rechnungen werden bei Auslieferung nicht mehr gedruckt trotz das der Haken aktiviert ist. JTL-Wawi 1.6 1
Neu Bestände bei eBay korrigieren JTL Ameise - Eigene Exporte 0
Neu Lizenzproblem bei eigenem Nova Child nach Update auf 5.1.4 JTL-Shop - Fehler und Bugs 0
Neu cStatus ändert sich nicht bei Stornierung in WAWI JTL-Shop - Fehler und Bugs 2
Neu Google Recaptcha funktioniert nicht mehr bei JTL Shop 4.05 User helfen Usern 1
Neu Problem bei JTL Vorlage - QR-Coder wird nicht generiert und USt-Id wird nicht angezeigt User helfen Usern - Fragen zu JTL-Wawi 5
Neu Umbuchungen/Minusbuchungen bei Artikeln mit Seriennummern OHNE Seriennummernverfolgung JTL-Wawi - Fehler und Bugs 0
Neu CN23 fehlende Daten bei Aufträgen mit mehreren Positionen bei ParcelOne JTL-ShippingLabels - Fehler und Bugs 0
Neu PAYPAL Plugin 2.1.2. zeigt bei JTL SHOP 5.1.4 unsere Bestellnummern nicht mehr an Plugins für JTL-Shop 2
Anzeige Einzelpreis als Hauptpreis bei Staffelpreisen, anstatt "ab" Preis Einrichtung JTL-Shop5 0
Neu Zahlung setzen bei mehreren Artikeln Shopware-Connector 0
Neu Überverkäufe bei Stücklisten Artikel übernehmen Installation von JTL-Wawi 7
Beantwortet Workflow: Bei Auftragsanlage Artikel bei Lieferant auf Bestand prüfen JTL-Workflows - Ideen, Lob und Kritik 2
Neu Bei Zahlungsarten mit Skonto ..... JTL-Wawi - Ideen, Lob und Kritik 0
Neu Wie stelle ich bei z.B. bei Amazon.com ein? User helfen Usern - Fragen zu JTL-Wawi 3
Neu Wir brauchen professionelle Hilfe bei der Einrichtung / Gestaltung des JTL Shops Starten mit JTL: Projektabwicklung & Migration 0
Neu verfügabre Artikel werden nicht bei E-Bay angezeigt eBay-Anbindung - Fehler und Bugs 2
Neu SW6 Connector Fehler bei Konfiguration Shopware-Connector 7
Neu Rechnung vereinfachen bei Konfigurationsartikeln User helfen Usern - Fragen zu JTL-Wawi 1
Neu Download Modul: bei Anmeldung mit Amazon-Konto, wird Download nicht im Shop-Kundenkonto zur Verfügung gestellt. Plugins für JTL-Shop 0
Neu Bei Versandklasse Brief nur Lieferschein drucken Arbeitsabläufe in JTL-Wawi 6
Neu Rabattberechnung bei Variationsartikeln fehlerhaft JTL-Shop - Fehler und Bugs 1
Neu Problem bei Sync zwischen JTL Wawi & JTL Shop Onlineshop-Anbindung 14
In Bearbeitung ZahlungseingangMail - Bei Aufträgen, die direkt über die WaWi erfasst worden sind -> Unmöglich?? JTL-Workflows - Ideen, Lob und Kritik 2
Neu JTL-Wawi stürzt ab bei kopieren der Positionen in Verkauf JTL-Wawi - Fehler und Bugs 0
Neu Variationen erweitern bei sehr vielen Artikel User helfen Usern - Fragen zu JTL-Wawi 0
Neu Update 1.6 Begrenzung der Zeichen bei Beschreibung umgehen User helfen Usern - Fragen zu JTL-Wawi 0
Neu Mit Seriennummer rausfinden bei welchem Lieferanten wir das Produkt gekauft haben? RMA User helfen Usern - Fragen zu JTL-Wawi 0
Neu Versandkosten und Steueranteil bei gemischten Steuersätzen werden nicht mehr korrekt von Woo in JTL übertragen WooCommerce-Connector 0
Fehler eBay Vorlage erstellen bei der Kategorie 1 Abteilung / Farbe / Stil es können nicht weniger als 1 Werte ausgewählt werden eBay-Anbindung - Fehler und Bugs 8
Neu Fehler eBay Vorlage erstellen bei der Kategorie 1 Abteilung / Farbe / Stil es können nicht weniger als 1 Werte ausgewählt werden JTL-Shop - Fehler und Bugs 3
Neu Falsche Preisvergabe bei der Erstellung einer Angebotsvorlage für Ebay, aus einer Globalen Angebotsvorlage eBay-Anbindung - Fehler und Bugs 0
Lieferdatum Rechnung ändern bei JTL 1.6 JTL-Wawi 1.6 1
JTL-Onlineshop (5) bei Google indexieren Einrichtung JTL-Shop5 1
Rückzahlung bei Teilstorno JTL-Wawi 1.6 3
Neu Bei Sortierung nach Preis aufsteigend werden die Sonderpreise nicht berücksichtigt Allgemeine Fragen zu JTL-Shop 4
In Diskussion Artikelbilder bei Retourenabwicklung direkt anzeigen JTL-WMS / JTL-Packtisch+ - Ideen, Lob und Kritik 1
Fehler bei Update: "SQLSTATE[42000]: Syntax error or access violation: 1068 Multiple primary key defined" Upgrade JTL-Shop4 auf JTL-Shop5 1

Ähnliche Themen