Robot.txt bei neuem Shophosting

Armystore

Mitglied
30. August 2021
10
1
Hallo,

Ich habe einen Shop 5 bei JTL neu gehostet. Ein Testshop wurde übernommen.
Die Robot.txt schaut so aus.
User-agent: *
Disallow:

sonst sind keinerlei Einträge vorhanden.
Gehe ich nun richitg in der Annahme das dadurch mein Shop nicht gecrawlt werden darf, da kompletter Zugriff verweigert wird ?
Ich hatte den Support angeschrieben und zwischenzeitlich folgene robot.txt erstellt.
User-agent: *
Allow: /
Sitemap: https://xxx/sitemap_index.xml
User-agent: Googlebot
Allow: /
User-agent: Googlebot-image
Allow: /
Disallow: /navi.php
Disallow: /druckansicht.php
Disallow: /suche.php
Disallow: /bestellabschluss.php
Disallow: /bestellvorgang.php
Disallow: /jtl.php
Disallow: /pass.php
Disallow: /registrieren.php
Disallow: /warenkorb.php
Disallow: /admin
Disallow: /admin/*
Disallow: /dbeS/*

Heute morgen dann die Rückmeldung vom Support das die Robot.txt auf die obige erste zrück gesetzt wurde.

Was wäre den nun Richtig ?

Gruß Marco
 

en001

Sehr aktives Mitglied
15. März 2017
369
38
Die obige ist richtig.

Wenn nichts geperrt wird ist crawlen erlaubt.

Disallow:
und
Allow : /

sind gleichwertig.

Der alte Standard der robots.txt von der Shopversion 4 war ja nicht richtig.
 

Armystore

Mitglied
30. August 2021
10
1
Vielen Dank für dein Antwort
Ich werde es mal so stehen lassen, und schauen was Google und co. so dazu sagt :)

Gruß
Marco
 
Ähnliche Themen
Titel Forum Antworten Datum
Neu Designvorlagen bei zweiter Firma nicht zu nutzen eBay-Designvorlagen - Fehler und Bugs 0
Neu Nachkommastellen bei Beständen ? User helfen Usern - Fragen zu JTL-Wawi 2
Neu Nachkommastellen bei Artikelanzahl Druck-/ E-Mail-/ Exportvorlagen in JTL-Wawi 1
Neu Immer noch kein Cross-Selling bei eBay mit Grundpreis-Artikeln? eBay-Designvorlagen - Fehler und Bugs 0
Neu Designvorlagen bei zweiter Firma nicht zu nutzen eBay-Designvorlagen - Ideen, Lob und Kritik 2
Neu Update von 5.0 auf 5.1.5 fehlgeschlagen, Fehler bei Datenbankaktualisierung Installation / Updates von JTL-Shop 1
Neu Fehler bei Google Betrieb / Pflege von JTL-Shop 11
Kurzbeschreibung bei Auftragserfassung am Bildschirm mit anzeigen (unter Positionsname) JTL-Wawi 1.6 0
Produktdaten werden bei Kaufland überschrieben kaufland.de - Anbindung (SCX) 2
Neu Geringe Zustellungsrate bei Newsletter die an t-online.de Email Adressen versendet werden User helfen Usern 7
Produktdaten werden bei Kaufland überschrieben JTL-Wawi 1.6 2
In Diskussion Kartenzahlung über OPI geht bei Storno nicht JTL-POS - Fehler und Bugs 3
Neu Gesamtpreis bei Staffelpreisen anzeigen Allgemeine Fragen zu JTL-Shop 1
Neu Abgleich Problem bei Ameise mit JTL 1.5.49.0 und Shopware Shop 5.3.7 Shopware-Connector 2
Neu UST-ID bei Amazon ändern (VCS aktiv) Amazon-Anbindung - Ideen, Lob und Kritik 1
JTL-Wawi 1.6.41.2 Amazon FBA Aufträge falsche MwSt bei „Versandaktion“ JTL-Wawi 1.6 0
Neu Problem bei Artikelimport nach Update auf JTL-WAWI 1.6 User helfen Usern - Fragen zu JTL-Wawi 0
Nach Update Fehler bei eBay-Abgleich JTL-Wawi 1.6 4
Neu Rabattfeld in Rechnung wird bei Verkäufen im Shop nicht angezeigt ... JTL-Wawi - Fehler und Bugs 2
Neu JTL-Wawi 1.6.42.0 Fehler bei Öffnung eines Auftrags System.Windows.Controls.UIElementCollection JTL-Wawi - Fehler und Bugs 0
Neu Eigene Felder bei Angebot/Auftrag/Abonnements nur anzeigen, wenn vorhanden Druck-/ E-Mail-/ Exportvorlagen in JTL-Wawi 4
Neu Retourenabfrage bei Auftragserstellung Arbeitsabläufe in JTL-Wawi 0
Neu falsche Preise bei Google Bildersuche JTL-Shop - Fehler und Bugs 2
Neu UPS im Versandarchiv des UPS-Portals wird nur ein "." bei dem Empfängernamen angezeigt. JTL-ShippingLabels - Fehler und Bugs 0
Neu TIPP: Artikel markieren die bei Kaufland eingestellt sind User helfen Usern - Fragen zu JTL-Wawi 0
Neu Preisglättung bei Preis Kalkulation (oder auf generell 2 Nachkommastellen begrenzen) User helfen Usern - Fragen zu JTL-Wawi 0
Beantwortet Hilfe bei RegEX in ecoDMS benötigt User helfen Usern 11
Neu Kundenkommentar bei Bestellung Allgemeine Fragen zu JTL-Shop 2
Neu Probleme bei der Preisanzeige eines Artikels beim JTL Shop 5 mit Nova Template Technische Fragen zu Plugins und Templates 12
Neu Probleme bei Update und Deinstallation der Wawi auf Win10P JTL-Wawi - Fehler und Bugs 4
Neu Fehler bei Staffelpreise Import und Shop Synchronisation User helfen Usern - Fragen zu JTL-Wawi 0
Neu Benachrichtigung bei Klarna Bestellung Allgemeine Fragen zu JTL-Shop 0
Gelöst Option "Stückzahl teilbar" wird bei jedem Öffnen zum Bearbeiten wieder auf 0 gesetzt JTL-POS - Fehler und Bugs 2
In Bearbeitung Staffelpreise von Kindartikel werden nur bei manuellem Speichern übernommen JTL-Shop - Fehler und Bugs 1
Neu Lagerbestand wird bei eingabe von freien Wareneingang nicht aktualisiert User helfen Usern - Fragen zu JTL-Wawi 2
Lagerbuchung bei Rechnungsstellung JTL-Wawi 1.6 3
Neu Miniatur Ansicht bei Google Templates für JTL-Shop 0
Neu Artikelbilder SEO import Abbruch bei nicht Erreichbarkeit der URL JTL-Ameise - Fehler und Bugs 0
Import bricht bei Zeile 1607 ab JTL-Wawi 1.6 1
Bei allen FBA Aufträgen wird als Versandland nur noch DE erstellt JTL-Wawi 1.6 6
Neu Abmeldelink bei Newsletter funktioniert nicht Allgemeine Fragen zu JTL-Shop 0
Neu Amazon Eigenversand - bei mehreren Paketen wird nur noch eine Tracking-Nummer übertragen Amazon-Anbindung - Fehler und Bugs 2
Neu Charge bei Stücklistenartikel wird nicht gedruckt Druck-/ E-Mail-/ Exportvorlagen in JTL-Wawi 1
Max Bestand bei Verkaufskanälen kaufland.de - Anbindung (SCX) 0
Neu Unendlich viele Benutzer kostenlos bei JTL-WMS gleichzeitig anmelden Gelöste Themen in diesem Bereich 11
Update bei JTL Shop Hosting Upgrade JTL-Shop4 auf JTL-Shop5 3
Neu PDF Formatierungsfehler bei automatischer E-Mail JTL-Wawi - Fehler und Bugs 2
Ungültige Steuerkonfiguration bei Rechnungsnummer xxxx! Für das Versandland [DE], Lieferland [DE] JTL-Wawi 1.6 0
Neu Shop-Übersichtsseiten betrifft Grundpreis bei Staffelpreisen "ab" "von...bis" und Vaterartikeln Allgemeine Fragen zu JTL-Shop 3
Neu Gratisartikel ausschließen bei Gutscheinen Arbeitsabläufe in JTL-Wawi 0

Ähnliche Themen