Robot.txt bei neuem Shophosting

Armystore

Aktives Mitglied
30. August 2021
15
4
Hallo,

Ich habe einen Shop 5 bei JTL neu gehostet. Ein Testshop wurde übernommen.
Die Robot.txt schaut so aus.
User-agent: *
Disallow:

sonst sind keinerlei Einträge vorhanden.
Gehe ich nun richitg in der Annahme das dadurch mein Shop nicht gecrawlt werden darf, da kompletter Zugriff verweigert wird ?
Ich hatte den Support angeschrieben und zwischenzeitlich folgene robot.txt erstellt.
User-agent: *
Allow: /
Sitemap: https://xxx/sitemap_index.xml
User-agent: Googlebot
Allow: /
User-agent: Googlebot-image
Allow: /
Disallow: /navi.php
Disallow: /druckansicht.php
Disallow: /suche.php
Disallow: /bestellabschluss.php
Disallow: /bestellvorgang.php
Disallow: /jtl.php
Disallow: /pass.php
Disallow: /registrieren.php
Disallow: /warenkorb.php
Disallow: /admin
Disallow: /admin/*
Disallow: /dbeS/*

Heute morgen dann die Rückmeldung vom Support das die Robot.txt auf die obige erste zrück gesetzt wurde.

Was wäre den nun Richtig ?

Gruß Marco
 

en001

Sehr aktives Mitglied
15. März 2017
444
43
Die obige ist richtig.

Wenn nichts geperrt wird ist crawlen erlaubt.

Disallow:
und
Allow : /

sind gleichwertig.

Der alte Standard der robots.txt von der Shopversion 4 war ja nicht richtig.
 

Armystore

Aktives Mitglied
30. August 2021
15
4
Vielen Dank für dein Antwort
Ich werde es mal so stehen lassen, und schauen was Google und co. so dazu sagt :)

Gruß
Marco
 
Ähnliche Themen
Titel Forum Antworten Datum
Neu Im Warenkorb werden falsche Merkmalnamen geladen bei mehrsprachigen Shops JTL-Shop - Fehler und Bugs 0
Zahlungsarten bei Angebote etc. JTL-Wawi 1.8 0
Neu Badges / Artikelsticker bei JTL Shop 5.3.0 Templates für JTL-Shop 0
Rechnungsentwurf wird nicht zur Rechnung bei Auslieferung JTL-Wawi 1.8 0
Neu Filtereinstellungen: wenn Sonderpreis bei Vater- oder Kindartikeln, Anzeige von Vater- UND Kindartikeln User helfen Usern - Fragen zu JTL-Wawi 5
Neu Workflow der bei Stücklisten: Überverkäufe de-/aktivieren User helfen Usern - Fragen zu JTL-Wawi 11
Neu Eigene Felder Checkbox Inhalt bzw. Text bei Mouseover anzeigen JTL-Wawi - Ideen, Lob und Kritik 0
Artikel bei Conrad anlegen JTL-Wawi 1.8 0
In Diskussion Liquid error: Parameteranzahlkonflikt bei einer einfachen Anweisung Gelöste Themen in diesem Bereich 3
Neu Fehler bei Bearbeitung von Designvorlagen eBay-Designvorlagen - Fehler und Bugs 0
Neu Amazon Varianten anlegen bei bestehendem Artikel Amazon-Anbindung - Fehler und Bugs 0
Beantwortet Versandgruppe bei Kaufland fehlt im Artikelstamm kaufland.de - Anbindung (SCX) 1
Neu Probleme mit Artikelzustand bei Ebay Laufene Artikel ändern Einrichtung und Installation von JTL-eazyAuction 3
Neu Wunschzettel Funktion auch bei Vaterartikeln möglich? Templates für JTL-Shop 0
Neu JTL 1.8.12.0 - Artikelattribut für Shop importieren - Format CSV-Datei / Hilfe bei Import von individuellen Attributen für JTL-Shop (googlekat) JTL-Ameise - Ideen, Lob und Kritik 1
Neu ASIN einem Produkt zuordnen zum aufschalten bei amazon JTL-Wawi 1.6 6
Preisschilder: Grundpreisberechnung bei Sonderpreisen JTL-Wawi 1.8 1
Neu Pulsierender Punkt bei Aufruf des Backends Gelöste Themen in diesem Bereich 12
Neu Kindpreise bei Vorlage Arbeitsabläufe in JTL-Wawi 4
Fehler beim Rendering der Attribute bei SCX Abgleich kaufland.de - Anbindung (SCX) 1
Formatierungsfehler in XML bei Verwendung von dotliquid kaufland.de - Anbindung (SCX) 2
Neu Warenkorb Hinweise bei Bestandsänderung und Preisänderung Allgemeine Fragen zu JTL-Shop 2
Neu 504 Gateway Time-Out nginx bei Plugin-Updates Gelöste Themen in diesem Bereich 10
Neu Bestand bei Stücklistenartikel ist falsch JTL-Wawi - Fehler und Bugs 2
Neu Unterstützung bei JTL5-Shop-Überarbeitung gesucht - Template/Plugin uvm. Dienstleistung, Jobs und Ähnliches 1
Beantwortet Farbe des Auftrages bei Retouren angepasst JTL-Workflows - Ideen, Lob und Kritik 1
SEPA-Einzug bei Teilrechnung JTL-Wawi 1.8 2
Token bei Amazon verlängert nun geht nichts mehr JTL-Wawi 1.7 4
Neu Unterseitenindexierung bei Google - wo ausschalten? Allgemeine Fragen zu JTL-Shop 1
Neu Automatisierter Import Händler-CSV, Problem mit unterschiedlichen Artikeln bei gleicher EAN Schnittstellen Import / Export 7
Neu Keine SEO URLs bei Kinderartikeln nach Update Allgemeine Fragen zu JTL-Shop 3
Automatisches MHD bei Import JTL-Wawi 1.8 1
In Bearbeitung Workflow offene Aufträge zusammenfassen bei ausgelieferten JTL-Workflows - Ideen, Lob und Kritik 1
Neu Ungewollte Rundung bei Vorkasse-Hinweis Allgemeine Fragen zu JTL-Shop 0
Versandkosten bei Retoure Otto.de - Anbindung (SCX) 0
In Diskussion Kasse berechnet falschen Bonrabatt bei gemischter Mehrwertsteuer JTL-POS - Fehler und Bugs 7
Gelöst Packtisch+ 1.8.112 : Rechnung wird bei Teillieferung erzeugt, obwohl als Ausführungsbedingung "Nur bei der letzten Teillieferung" ausgewählt ist. JTL-WMS / JTL-Packtisch+ - Fehler und Bugs 2
Neu Benachrichtigung per Workflow bei Wareneingang User helfen Usern - Fragen zu JTL-Wawi 24
JTL stürzt bei Druckvorschau oder Drucken seit Wechsel auf v.1.7 immer wieder ab JTL-Wawi 1.8 6
Rechnungskorrektur in JTL bei OTTO Retoure erstellen? Otto.de - Anbindung (SCX) 1
Wie kann ich eine Benachrichtigung bei einem Wareneingang auslösen mit einer Mail über die Artikel die eingebucht wurden JTL-Wawi 1.8 2
Neu Mehrfachauswahl bei Variationen User helfen Usern - Fragen zu JTL-Wawi 1
Neu SQL-Fehler bei Volltextsuche und Sonderzeichen JTL-Shop - Fehler und Bugs 0
Neu Coupon einlösbar bei Mindestbestellwert aus Kategorie xy Allgemeine Fragen zu JTL-Shop 0
Neu Ebay Artikel - bei Umstellung auf Designvorlagen werden Beschreibungen verändert User helfen Usern - Fragen zu JTL-Wawi 1
Neu SQL-Abfrage bei Kundenanlage JTL-Wawi 1.7 2
Neu offene Fragen bei EcoDMS - Erfahrungen mit kostenpflichtigem Support ?! User helfen Usern 1
Neu ist das Hinzufügen eines zusätzlichen Hinweis bei Artikeln, mit bestimmtem Merkmal, die auf die Einkaufsliste wandern möglich ? User helfen Usern - Fragen zu JTL-Wawi 0
Neu Fehlerbehebung bei TCP/IP-Verbindungsproblemen in JTL-Netzwerken Technische Fragen zu Plugins und Templates 0
Neu Ständiges Reload Icon in mobiler Version bei Konfigurator Allgemeine Fragen zu JTL-Shop 0

Ähnliche Themen